递归代码世界模型:通过递归场景程序构建复杂世界
摘要
RCWM引入了一种递归框架,用于从单张图像重建复杂3D世界为可执行代码,使用全局-局部-全局递归并超越先前方法。
查看缓存全文
缓存时间: 2026/09/11 06:16
论文页面 - 递归代码世界模型:通过递归场景程序构建复杂世界
来源:https://huggingface.co/papers/2609.11499
摘要
递归代码世界模型(RCWM)通过交替进行全局与局部重建并共享相机对齐,从单张图像递归构建可执行代码形式的复杂三维世界。
代码世界模型以可执行程序的形式表征世界,但仅凭这种表征并不足以构建复杂世界。我们提出递归代码世界模型(RCWM),这是一个从单张参考图像重建复杂三维世界的代码框架。RCWM将递归场景程序(RSP)表示与自身递归调用的构建求解器相结合。RSP以组合式场景代码表征可执行世界,而每次求解器调用遵循相同的完整流程:确立整体、递归重建未解决部分、重新审视整体以优化其组合。这种全局-局部-全局的递归过程为精细结构提供了独立的感知-编辑循环,同时保持了场景整体的几何结构与关系。参考对齐视图在不同层级间传播共享的相机投影,而父级重新审视则处理局部优化后出现的边界、空间关系与共享误差。视觉语言编码智能体直接将参考图像与场景渲染进行对比,以指导优化、递归下降与返回过程。在复杂场景中,RCWM超越了以往基于代码的图像到场景重建方法。消融研究进一步支持递归构建的优越性,并表明更深层次的调用能提升精细尺度的重建效果。RCWM为从视觉证据构建复杂可执行世界提供了递归构建原则。
查看arXiv页面 (https://arxiv.org/abs/2609.11499) 查看PDF (https://arxiv.org/pdf/2609.11499) 添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2609.11499)
通过智能体获取此论文:
hf papers read 2609.11499
没有最新CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用此论文的模型0
无模型关联此论文
在模型README.md中引用 arxiv.org/abs/2609.11499 以从本页面链接。
引用此论文的数据集0
无数据集关联此论文
在数据集README.md中引用 arxiv.org/abs/2609.11499 以从本页面链接。
引用此论文的Spaces0
无Space关联此论文
在Space README.md中引用 arxiv.org/abs/2609.11499 以从本页面链接。
包含此论文的收藏0
无收藏包含此论文
将此论文添加到收藏 (https://huggingface.co/new-collection) 以从本页面链接。
相似文章
Code World Model:编程代理作为世界大脑
本文介绍了Code World Model,这是一个结合了用于推理和编码的语言模型与用于视觉渲染的视频模型,以开放式方式模拟持续世界演化的框架。
Programmable World Model
可编程世界模型引入了一个框架,将世界状态演化与视觉生成解耦,通过可执行程序和3D边界框实现持久且可控的环境。
SceneCode:用于可编辑室内场景(含铰接物体)的可执行世界程序
SceneCode 将自然语言提示转化为可执行代码,生成可交互、可用于仿真的室内场景(含铰接物体),实现细粒度的可控性与按需资产创建。
代码即世界:物理推理中可执行世界表示的代理式发现
代码即世界引入了一种范式,通过将物理环境表示为可执行代码,为视觉语言模型提供定量推理能力。它使用代理式发现循环实现可扩展监督,并达到了最先进的性能。
ReWorld:一个具有长期记忆的交互式世界模型
ReWorld 提出了一个交互式世界模型,该模型使用混合注意力窗口和分布匹配的LoRA蒸馏,将短期控制与长期记忆解耦,实现了具有高动作保真度和回忆能力的实时视频生成。