@rohanpaul_ai:又一只漂亮的机械手。WUJI 让其 20 关节机械手 WUJI Hand 2 在物理模拟器中练习转笔……
摘要
WUJI 展示了其 20 关节的 WUJI Hand 2 完成转笔动作,该技能在基于 MuJoCo 的 mjlab 模拟器中使用 PPO 算法训练,随后部署到真实机械手上。同时还展示了一款用于遥操作和数据采集的传感手套。代码、动作片段、训练模型和可打印的笔文件均以 Apache 2.0 许可证开源发布。
查看缓存全文
缓存时间: 2026/10/10 22:56
又一只精美的机器手
WUJI 训练了其 20 关节机器人手 WUJI Hand 2 在物理模拟器中转笔,然后将训练好的策略直接部署到真实机械手上运行。
他们在 IROS 2026(国际智能机器人与系统会议)上展示了这一成果,同时展示了一只传感器手套,可以让人类实时控制这只机械手。
转笔是对机器人手的一大难题考验,因为笔会不断滚动、滑动、在手指间传递,任何一根手指稍微慢一拍就会让笔掉落。
@wuji_global 的 Hand 2 拥有 20 个关节,每根手指 4 个关节,每个关节由独立电机驱动,支持 1,000 Hz 的控制频率。
训练使用了 mjlab——一个基于 MuJoCo 物理模拟器构建的机器人学习工具包,同时运行 4,096 个虚拟手副本,采用 PPO(近端策略优化)进行训练,这是一种通过试错不断改进、对正确动作给予奖励的强化学习方法。
AI 学习跟随 40 个录制的转笔动作,分为 5 组,从绕单一轴的简单翻转到跨多个轴的连续旋转,每当笔偏离计划时,AI 都会实时调整手指。
在真实机械手上,策略以每秒 50 次的频率向全部 20 个关节发送目标指令,同时一台工业相机追踪一支 250mm 3D 打印笔两端的印刷标记以及手腕上的标签,确保 AI 始终掌握笔的位置。
手套则代表了另一种教机器人的方式:指尖上的 5 个电磁传感器以每秒 120 次的频率追踪每根手指的位置和角度,延迟约 10 毫秒或更低,软件将其转换为机械手需要复制的关节角度。
手套掌心的 526 点压力网格还可以记录人的握持力度,这对于收集“人类示范“型训练数据非常有用。
WUJI 以 Apache 2.0 开源协议发布了代码、动作片段、训练模型和可打印的笔模型文件,因此任何拥有一只 WUJI Hand 2、一台相机和一块 NVIDIA GPU 的实验室都可以复现整个方案。
WUJI(@wuji_global): 在 WUJI Hand 2 上转笔,从仿真训练到真实执行。
我们使用动作参考追踪和强化学习,将仿真训练的策略迁移到真实机械手上。
代码和搭建指南均已开源,欢迎开发者和研究人员在此基础上继续构建。
相似文章
@Knesix: 哇。看起来太棒了!
WUJI 展示了其拥有 20 个关节的 WUJI Hand 2 机器人手转笔的能力。该机器人手在物理仿真器中进行训练,并通过仿真到现实迁移部署,于 IROS 2026 前后亮相。
@LinusEkenstam:人形机器人正在超越基础抓取,迈向灵巧操作。这些 WUJI 演示确实令人印象深刻。移动……
WUJI 展示了其 Hand 2 人形灵巧手,它通过摄像头追踪或手套来模仿人类手部动作,并在 mjlab 仿真环境中通过强化学习掌握转笔等技能,然后将这些技能迁移到现实世界。wuji-mjlab 代码已开源,供开发者和研究人员使用。
在ICRA2026上最新发布的Wuji Hand 2
Wuji Hand 2 机器人手在ICRA 2026上最新发布并展示,展示了灵巧机器人操作硬件方面的进展。
@guanqi_he: 我们发布了 Wuji MJLab,一个用于灵巧手操作的开源 MuJoCo 环境。它包含一个立方体重新定向…
Wuji MJLab 是一个用于灵巧手操作的开源 MuJoCo 环境,包含立方体重新定向任务、sim2real 流水线以及在 Wuji Hand 上的部署。它基于 mjlab,并包括预训练的 PPO 策略。
@rohanpaul_ai: 这些机械手将导致按摩院的一些裁员 协调的手指动作。握拳、指向和……
Xynova 在维也纳的 ICRA 2026 上展示了一只能够进行协调手指动作的机械手,包括握拳、指向和精确捏取。