3DCodeVerse:将3D世界编码为代码
摘要
3DCodeVerse引入了一个研究生态体系,包含一个200万规模的可执行3D代码数据集、一个用于3D内容自动生成与验证的多智能体DAG框架,以及实证指南,表明经过微调的开源模型在与Claude Design(3D Object)的对比中达到了90%的胜率。
查看缓存全文
缓存时间: 2026/10/16 03:01
论文页面 - 3DCodeVerse:以代码方式探索 3D 世界
来源:https://huggingface.co/papers/2610.22341 作者:
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
摘要
3DCodeVerse 是一个研究生态系统,提供数据集、自动化验证工具和实证指导,通过可执行代码实现可扩展、可编辑且可验证的 3D 内容生成。
我们提出 3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse),这是一个研究生态系统,使编程智能体能够大规模创建可编辑且可验证的 3D 内容。3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse)包含大规模、高质量的可执行 3D 代码数据集(https://huggingface.co/papers?q=executable%203D%20code)、用于空间推理(https://huggingface.co/papers?q=spatial%20reasoning)和自动化验证(https://huggingface.co/papers?q=automated%20verification)的编程工具框架(https://huggingface.co/papers?q=coding%20harness),以及 3D 编程的实用指导。首先,我们构建了 3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse)-2M,一个大规模的独立 3D 可执行代码精选数据集。我们通过收集开源数据、转换专用表示形式以及使用编程智能体生成新程序来构建该语料库。每个程序都打包了源文件以及在其声明的环境中执行所需的关联资源,并附带可用的描述和验证记录。其次,我们开发了 3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse)工具框架,这是一个用于生成和优化 3D 内容的多智能体有向无环图(https://huggingface.co/papers?q=multi-agent%20directed%20acyclic%20graph)框架。它利用执行检查(https://huggingface.co/papers?q=execution%20checks)、空间测量(https://huggingface.co/papers?q=spatial%20measurements)和视觉反馈(https://huggingface.co/papers?q=visual%20feedback)在生成过程中无需人工反馈即可自动评估和修正生成的程序。第三,我们对 3D 编程进行了系统性的实证研究,使用微调开源模型(https://huggingface.co/papers?q=fine-tuned%20open%20models)建立基线,并通过对我们工具框架的组件级分析得出实用指导。大量实验证明,在我们的数据集上进行微调能显著提升开源模型的 3D 编程能力。值得注意的是,我们的 3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse)工具框架在由 Claude Opus 5.5 驱动时,在成对人工评估中对 Claude Design(3D Object)达到了 90% 的胜率。
查看 arXiv 页面(https://arxiv.org/abs/2610.22341)查看 PDF(https://arxiv.org/pdf/2610.22341)项目页面(https://3dcodeverse.com/)GitHub(https://github.com/gaoypeng/3dcodeverse)添加到收藏夹(https://huggingface.co/login?next=%2Fpapers%2F2610.22341)
在您的智能体中获取此论文:
hf papers read 2610.22341
没有最新版 CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用此论文的模型 0
没有模型链接此论文
在模型 README.md 中引用 arxiv.org/abs/2610.22341 以从该页面链接它。
引用此论文的数据集 1
ilabai/3dcodeverse Viewer• 更新于5分钟前 • 2.03M • 15.3k • 7 (https://huggingface.co/datasets/ilabai/3dcodeverse)
引用此论文的 Space 0
没有 Space 链接此论文
在 Space README.md 中引用 arxiv.org/abs/2610.22341 以从该页面链接它。
包含此论文的合集 0
没有合集包含此论文
将此论文添加到合集(https://huggingface.co/new-collection)以从该页面链接它。
相似文章
3DCodeBench:通过代码对智能体过程化3D建模进行基准测试
本文介绍了3DCodeBench——一个用于评估视觉语言模型通过代码进行过程化3D建模的基准测试,以及3DCodeArena——一个基于成对人类偏好的排名平台。
Code2Games:让编码智能体实现游戏世界生成
Code2Games 是一个智能体框架,它协调多个编码智能体,根据自然语言的游戏意图构建一致的游戏世界,并通过执行引导的重建将其适配至 Unreal Engine 5,同时提出了用于评估游戏世界生成质量的 GameCode4D 基准测试。
代码即世界:物理推理中可执行世界表示的代理式发现
代码即世界引入了一种范式,通过将物理环境表示为可执行代码,为视觉语言模型提供定量推理能力。它使用代理式发现循环实现可扩展监督,并达到了最先进的性能。
4DCodeBench:面向动态场景逆图形学的智能体基准测试
4DCodeBench 提出了一个通过代码生成实现 4D 逆图形学的基准测试,其中智能体需要将视频中的动态场景重建为可执行的图形程序。前沿模型在静态重建方面表现强劲,但在可靠捕获形变、流体流动、断裂等复杂动态方面仍面临挑战。
SceneCode:用于可编辑室内场景(含铰接物体)的可执行世界程序
SceneCode 将自然语言提示转化为可执行代码,生成可交互、可用于仿真的室内场景(含铰接物体),实现细粒度的可控性与按需资产创建。