3DCodeVerse:将3D世界编码为代码

Hugging Face Daily Papers 论文

摘要

3DCodeVerse引入了一个研究生态体系,包含一个200万规模的可执行3D代码数据集、一个用于3D内容自动生成与验证的多智能体DAG框架,以及实证指南,表明经过微调的开源模型在与Claude Design(3D Object)的对比中达到了90%的胜率。

我们提出3DCodeVerse,一个研究生态体系,使编码智能体能够大规模创建可编辑、可验证的3D内容。3DCodeVerse包含大规模高质量的可执行3D代码数据集、一个面向空间推理与自动化验证的编码框架,以及3D编码的实用指南。首先,我们构建了3DCodeVerse-2M,一个大规模精选的独立可执行3D代码数据集。我们通过收集开源数据、转换专用表示形式,并利用编码智能体生成新程序来构建该语料库。每个程序都打包了源文件、在声明环境中执行所需的相关资产,以及可用的描述和验证记录。其次,我们开发了3DCodeVerse Harness,一个多智能体有向无环图(DAG)框架,用于生成和优化3D内容。它利用执行检查、空间测量和视觉反馈,在生成过程中无需人工干预即可自动评估和修正生成的程序。第三,我们对3D编码进行了系统性的实证研究,利用微调的开源模型建立了基线,并通过对我们框架的组件级分析提炼出实用指南。大量实验表明,在我们的数据集上进行微调显著提升了开源模型的3D编码能力。值得注意的是,当均由Claude Opus 5.5驱动时,我们的3DCodeVerse Harness在成对人工评估中对Claude Design(3D Object)达到了90%的胜率。
查看原文
查看缓存全文

缓存时间: 2026/10/16 03:01

论文页面 - 3DCodeVerse:以代码方式探索 3D 世界

来源:https://huggingface.co/papers/2610.22341 作者:

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

摘要

3DCodeVerse 是一个研究生态系统,提供数据集、自动化验证工具和实证指导,通过可执行代码实现可扩展、可编辑且可验证的 3D 内容生成。

我们提出 3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse),这是一个研究生态系统,使编程智能体能够大规模创建可编辑且可验证的 3D 内容。3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse)包含大规模、高质量的可执行 3D 代码数据集(https://huggingface.co/papers?q=executable%203D%20code)、用于空间推理(https://huggingface.co/papers?q=spatial%20reasoning)和自动化验证(https://huggingface.co/papers?q=automated%20verification)的编程工具框架(https://huggingface.co/papers?q=coding%20harness),以及 3D 编程的实用指导。首先,我们构建了 3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse)-2M,一个大规模的独立 3D 可执行代码精选数据集。我们通过收集开源数据、转换专用表示形式以及使用编程智能体生成新程序来构建该语料库。每个程序都打包了源文件以及在其声明的环境中执行所需的关联资源,并附带可用的描述和验证记录。其次,我们开发了 3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse)工具框架,这是一个用于生成和优化 3D 内容的多智能体有向无环图(https://huggingface.co/papers?q=multi-agent%20directed%20acyclic%20graph)框架。它利用执行检查(https://huggingface.co/papers?q=execution%20checks)、空间测量(https://huggingface.co/papers?q=spatial%20measurements)和视觉反馈(https://huggingface.co/papers?q=visual%20feedback)在生成过程中无需人工反馈即可自动评估和修正生成的程序。第三,我们对 3D 编程进行了系统性的实证研究,使用微调开源模型(https://huggingface.co/papers?q=fine-tuned%20open%20models)建立基线,并通过对我们工具框架的组件级分析得出实用指导。大量实验证明,在我们的数据集上进行微调能显著提升开源模型的 3D 编程能力。值得注意的是,我们的 3DCodeVerse(https://huggingface.co/papers?q=3DCodeVerse)工具框架在由 Claude Opus 5.5 驱动时,在成对人工评估中对 Claude Design(3D Object)达到了 90% 的胜率。

查看 arXiv 页面(https://arxiv.org/abs/2610.22341)查看 PDF(https://arxiv.org/pdf/2610.22341)项目页面(https://3dcodeverse.com/)GitHub(https://github.com/gaoypeng/3dcodeverse)添加到收藏夹(https://huggingface.co/login?next=%2Fpapers%2F2610.22341)

在您的智能体中获取此论文:

hf papers read 2610.22341

没有最新版 CLI?curl -LsSf https://hf.co/cli/install.sh | bash

引用此论文的模型 0

没有模型链接此论文

在模型 README.md 中引用 arxiv.org/abs/2610.22341 以从该页面链接它。

引用此论文的数据集 1

ilabai/3dcodeverse Viewer• 更新于5分钟前 • 2.03M • 15.3k • 7 (https://huggingface.co/datasets/ilabai/3dcodeverse)

引用此论文的 Space 0

没有 Space 链接此论文

在 Space README.md 中引用 arxiv.org/abs/2610.22341 以从该页面链接它。

包含此论文的合集 0

没有合集包含此论文

将此论文添加到合集(https://huggingface.co/new-collection)以从该页面链接它。

相似文章

Code2Games:让编码智能体实现游戏世界生成

Hugging Face Daily Papers

Code2Games 是一个智能体框架,它协调多个编码智能体,根据自然语言的游戏意图构建一致的游戏世界,并通过执行引导的重建将其适配至 Unreal Engine 5,同时提出了用于评估游戏世界生成质量的 GameCode4D 基准测试。

4DCodeBench:面向动态场景逆图形学的智能体基准测试

Hugging Face Daily Papers

4DCodeBench 提出了一个通过代码生成实现 4D 逆图形学的基准测试,其中智能体需要将视频中的动态场景重建为可执行的图形程序。前沿模型在静态重建方面表现强劲,但在可靠捕获形变、流体流动、断裂等复杂动态方面仍面临挑战。