real2sim

Real2Gym是一个基于代理的Real2Sim2Real框架，它将人类和机器人的视频演示转化为交互式模拟训练场，使技能能够转移到物理机器人上，并且成功率优于基线。

HomeBody是一种人形机器人系统，它探索环境、使用Real2Sim构建数字孪生，并利用VLMs执行自主长期任务，如整理厨房。

HomeBody是一款由GPT Astra控制的类人机器人，它探索未知环境，构建数字孪生体，并执行长期任务，如整理和检索物体，无需特定环境训练。

GPT-6展示了自主启动虚拟机、设置MuJoCo并从视频中重建场景的能力，用于具身AI研究，突出了现实到模拟到现实工作流的进步。

TableVerse 引入了一个完全自动化的 Real2Sim 流水线，将非结构化、野外图像转换为高保真、可模拟的桌面环境，具有精确的度量标准和物理稳定性，同时提供了一个大规模数据集（TableVerse-100K），用于可泛化的机器人操作。