RoboDojo:用于通用机器人操作策略综合评估的统一仿真与真实世界基准
摘要
RoboDojo是一个用于全面评估通用机器人操作策略的统一仿真与真实世界基准,包含42个仿真任务和18个真实世界任务,涵盖多个评估维度。
查看缓存全文
缓存时间: 2026/07/09 07:50
论文页面 - RoboDojo:面向通用机器人操作策略全面评估的统一虚实仿真基准
来源:https://huggingface.co/papers/2607.04434 作者:
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
摘要
RoboDojo 提出了一个统一的虚拟-现实基准,用于在多样化任务和评估维度上全面评估通用机器人操作策略。
通用机器人操作策略取得了快速发展,然而现有基准在系统评估其能力方面仍然有限。许多基准依赖于简单、短时域或技能狭窄的任务,能力覆盖有限,并且通常仅在仿真或仅在现实世界中进行。仿真能够提供可扩展的反馈,但缺乏物理部署挑战;而现实世界评估成本高昂、耗时且难以复现。我们推出 RoboDojo——一个用于全面评估通用机器人操作策略的统一虚拟-现实基准。RoboDojo 包含 42 个仿真任务和 18 个现实世界任务,涵盖多样且互补的操作能力。仿真基准评估五个维度:泛化能力、记忆能力、精度、长时域执行能力以及开放词汇指令跟随能力,而现实世界基准则将策略暴露于具有挑战性的物理世界部署条件下。RoboDojo 通过 Isaac Sim 中的异构并行仿真支持可扩展评估,并提供 RoboDojo-Real Eval——一个可复现的现实世界评估系统,具备远程云端访问、标准化硬件、场景重置、评估协议和部署接口。结合 XPolicyLab,策略可以一次集成,然后在仿真和现实世界设置中只需极少的适配即可进行评估。我们将 30 个策略集成到 XPolicyLab 中,并在 RoboDojo 上对其进行评估,建立了一个公开排行榜以及对当前策略性能的系统分析。网站可在 http://robodojo-benchmark.com/ 访问。
查看 arXiv 页面 (https://arxiv.org/abs/2607.04434) 查看 PDF (https://arxiv.org/pdf/2607.04434) 项目页面 (https://robodojo-benchmark.com/) GitHub92 (https://github.com/RoboDojo-Benchmark/RoboDojo) 添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2607.04434)
在你的智能体中获取这篇论文:
hf papers read 2607.04434
没有最新的 CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用此论文的模型0
没有模型链接此论文
请在一个模型的 README.md 中引用 arxiv.org/abs/2607.04434,以便从本页面链接到它。
引用此论文的数据集1
cy0307/awesome-egocentric-atlas 查看器• 约 1 小时前更新 • 816 • 1.21k • 5 (https://huggingface.co/datasets/cy0307/awesome-egocentric-atlas)
引用此论文的 Spaces0
没有 Space 链接此论文
请在一个 Space 的 README.md 中引用 arxiv.org/abs/2607.04434,以便从本页面链接到它。
包含此论文的收藏集0
没有收藏集包含此论文
将这篇论文添加到一个收藏集 (https://huggingface.co/new-collection) 中,以便从本页面链接到它。
相似文章
RoboLab:用于任务通用策略分析的高保真仿真基准
# 论文页面 - RoboLab:用于任务通用策略分析的高保真仿真基准 来源:[https://huggingface.co/papers/2604.09860](https://huggingface.co/papers/2604.09860) ## 摘要 RoboLab 是一个仿真基准框架,通过可扩展的真实任务生成和对策略在受控扰动下行为的系统分析,解决机器人策略评估中的局限。
@MarioChan2002: 我们评估了30多个前沿具身AI模型。结果很明确:当前的通用机器人策略仍然远未达到…
对30多个具身AI模型的评估发现,当前的通用机器人策略缺乏实际操纵的鲁棒性,因此我们构建了RoboDojo。
Roboschool
OpenAI 发布 Roboschool,这是一个与 OpenAI Gym 集成的开源机器人模拟环境,包含12个环境,涵盖增强型人形机器人运动任务和 Pong 等多智能体设置。
RoboMemArena:一个全面且具挑战性的机器人记忆基准测试
RoboMemArena 推出了一项大规模基准测试,旨在通过现实世界验证评估涵盖 26 个复杂任务的机器人记忆能力,并提出了 PrediMem,这是一种利用预测编码优化记忆管理的双系统视觉 - 语言 - 动作模型。
RoboTALES:通过任务对齐的模拟未来学习推理引导的机器人策略
RoboTALES引入了一个两阶段框架,结合基于LLM的规划和基于VLM的批评,以改进任务对齐的视频生成和机器人策略训练,在长时域操作任务上显著优于现有方法。