4DCodeBench:面向动态场景逆图形学的智能体基准测试
摘要
4DCodeBench 提出了一个通过代码生成实现 4D 逆图形学的基准测试,其中智能体需要将视频中的动态场景重建为可执行的图形程序。前沿模型在静态重建方面表现强劲,但在可靠捕获形变、流体流动、断裂等复杂动态方面仍面临挑战。
查看缓存全文
缓存时间: 2026/10/05 20:50
论文页面 - 4DCodeBench:面向动态场景逆向图形学的智能体基准测试
来源:https://huggingface.co/papers/2610.03715
摘要
我们提出 4DCodeBench,这是一个通过代码生成来评估 4D 逆向图形学能力的基准测试,其中智能体需要从视频中重建动态场景并生成可执行的图形程序。为完成这一任务,智能体必须将视觉观测转化为对场景结构与动态过程的紧凑表示,例如实现物理仿真等抽象机制来复现复杂行为。为了评估这一能力,我们整理了一套真实世界视频数据集,并构建了涵盖多种物理现象(包括形变、流体流动和断裂等)的合成场景。我们对前沿模型进行了大量基准测试,发现强大的静态重建能力尚不能转化为对复杂动态过程的可靠重建。4DCodeBench 为追踪智能体通过代码解读世界动态能力的发展提供了一个测试平台。我们的基准测试可在 https://github.com/4DCodeBench/4DCodeBench 获取。
查看 arXiv 页面 (https://arxiv.org/abs/2610.03715) | 查看 PDF (https://arxiv.org/pdf/2610.03715) | 项目主页 (https://4dcodebench.com/) | GitHub (https://github.com/4DCodeBench/4DCodeBench) | 添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2610.03715)
在你的智能体中获取本文:
hf papers read 2610.03715
还没有最新版 CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用本文的模型 0
没有模型与本文关联。
在模型 README.md 中引用 arxiv.org/abs/2610.03715,即可从此页面关联到该模型。
引用本文的数据集 2
4DCodeBench/Dataset-Synthetic Viewer • 约 7 小时前更新 • 100 • 74 (https://huggingface.co/datasets/4DCodeBench/Dataset-Synthetic)
4DCodeBench/Dataset-Real-World 约 8 小时前更新 • 19 (https://huggingface.co/datasets/4DCodeBench/Dataset-Real-World)
引用本文的 Spaces 0
没有 Space 与本文关联。
在 Space README.md 中引用 arxiv.org/abs/2610.03715,即可从此页面关联到该 Space。
包含本文的合集 0
没有合集包含本文。
将本文添加到合集 (https://huggingface.co/new-collection),即可从此页面关联。
相似文章
3DCodeBench:通过代码对智能体过程化3D建模进行基准测试
本文介绍了3DCodeBench——一个用于评估视觉语言模型通过代码进行过程化3D建模的基准测试,以及3DCodeArena——一个基于成对人类偏好的排名平台。
SceneActBench: 智能体能否在其看到的3D场景中执行操作?
SceneActBench是一个基准测试,用于评估VLM智能体在完整的多对象3D场景中执行操作的能力,通过五个任务中的任务特定几何指标进行评估。
ShapeCodeBench:合成形状场景中感知到程序重建的可再生基准
ShapeCodeBench是一个用于感知到程序重建的合成基准,模型需从光栅图像生成可执行的绘图程序,评估指标包括精确匹配和像素准确率。该基准通过种子随机数生成器实现可再生性,当前模型仍获得较低的精确匹配率,表明还有改进空间。
CineRecon:面向智能体电影级重建的前沿模型基准测试
CineRecon 引入了一个包含50个参考视频和360个带标注评估片段的基准,用于测试前沿模型从视频重建可编辑动态3D场景的能力,从相机一致性、静态一致性和动态一致性三个维度评估了12个模型,发现三个维度均存在不足。
MemoBench:动态变化环境中世界建模的基准测试
MemoBench是一个诊断基准,用于评估视频生成模型在动态变化环境中的记忆一致性,其中物体消失并以更新后的状态重新出现。它包括360个真实视频片段和一个结合自动指标与基于VQA评估的测试套件,揭示了记忆一致性挑战的洞见。