@rohanpaul_ai:又一只漂亮的机械手。WUJI 让其 20 关节机械手 WUJI Hand 2 在物理模拟器中练习转笔……

X AI KOLs Timeline 产品

摘要

WUJI 展示了其 20 关节的 WUJI Hand 2 完成转笔动作,该技能在基于 MuJoCo 的 mjlab 模拟器中使用 PPO 算法训练,随后部署到真实机械手上。同时还展示了一款用于遥操作和数据采集的传感手套。代码、动作片段、训练模型和可打印的笔文件均以 Apache 2.0 许可证开源发布。

又一只漂亮的机械手。 WUJI 训练其 20 关节机械手 WUJI Hand 2 在物理模拟器中练习转笔,然后将同样的训练策略直接运行在真实机械手上。 他们在 IROS 2026(国际智能机器人与系统会议)期间展示了这一成果,同时展示的还有一款可以让人实时控制机械手的传感手套。 转笔对机械手来说是一项高难度测试,因为笔会不断滚动、滑动并在手指之间传递,任何一根手指动作稍有延迟,笔就会掉落。 @wuji_global 的 Hand 2 拥有 20 个关节,每根手指四个,各自由独立电机驱动,支持 1,000 Hz 的控制频率。 训练使用了 mjlab——一个基于 MuJoCo 物理模拟器构建的机器人学习工具包,同时运行 4,096 个虚拟手副本,采用 PPO(近端策略优化)算法,这是一种通过试错来提升表现、对良好动作给予奖励的强化学习方法。 AI 需要学会跟随 5 组共 40 个录制的笔部动作,从单轴简单翻转到跨多个轴的连续旋转,并在笔偏离预定轨迹时持续纠正手指动作。 在真实机械手上,策略以每秒 50 次的频率向全部 20 个关节发送目标值,同时一台工业相机追踪 250mm 3D 打印笔两端的印刷标记以及腕部的一个标签,让 AI 始终掌握笔的位置。 手套代表了另一种训练机器人的方式:指尖的 5 个电磁传感器以每秒 120 次的频率追踪每根手指的位置和角度,延迟约 10ms 或更低,软件将其转换为关节角度,机械手直接复制执行。 手套掌心的 526 点压力网格还能记录人的握持力度,这使其非常适合为需要通过模仿人类来学习的机器人采集训练数据。 WUJI 以 Apache 2.0 开源许可证发布了代码、动作片段、训练模型和可打印笔文件,因此任何配备 WUJI Hand 2、一台相机和一块 NVIDIA GPU 的实验室都可以复现整个系统。
查看原文
查看缓存全文

缓存时间: 2026/10/10 22:56

又一只精美的机器手

WUJI 训练了其 20 关节机器人手 WUJI Hand 2 在物理模拟器中转笔,然后将训练好的策略直接部署到真实机械手上运行。

他们在 IROS 2026(国际智能机器人与系统会议)上展示了这一成果,同时展示了一只传感器手套,可以让人类实时控制这只机械手。

转笔是对机器人手的一大难题考验,因为笔会不断滚动、滑动、在手指间传递,任何一根手指稍微慢一拍就会让笔掉落。

@wuji_global 的 Hand 2 拥有 20 个关节,每根手指 4 个关节,每个关节由独立电机驱动,支持 1,000 Hz 的控制频率。

训练使用了 mjlab——一个基于 MuJoCo 物理模拟器构建的机器人学习工具包,同时运行 4,096 个虚拟手副本,采用 PPO(近端策略优化)进行训练,这是一种通过试错不断改进、对正确动作给予奖励的强化学习方法。

AI 学习跟随 40 个录制的转笔动作,分为 5 组,从绕单一轴的简单翻转到跨多个轴的连续旋转,每当笔偏离计划时,AI 都会实时调整手指。

在真实机械手上,策略以每秒 50 次的频率向全部 20 个关节发送目标指令,同时一台工业相机追踪一支 250mm 3D 打印笔两端的印刷标记以及手腕上的标签,确保 AI 始终掌握笔的位置。

手套则代表了另一种教机器人的方式:指尖上的 5 个电磁传感器以每秒 120 次的频率追踪每根手指的位置和角度,延迟约 10 毫秒或更低,软件将其转换为机械手需要复制的关节角度。

手套掌心的 526 点压力网格还可以记录人的握持力度,这对于收集“人类示范“型训练数据非常有用。

WUJI 以 Apache 2.0 开源协议发布了代码、动作片段、训练模型和可打印的笔模型文件,因此任何拥有一只 WUJI Hand 2、一台相机和一块 NVIDIA GPU 的实验室都可以复现整个方案。

WUJI(@wuji_global): 在 WUJI Hand 2 上转笔,从仿真训练到真实执行。

我们使用动作参考追踪和强化学习,将仿真训练的策略迁移到真实机械手上。

代码和搭建指南均已开源,欢迎开发者和研究人员在此基础上继续构建。

相似文章

@Knesix: 哇。看起来太棒了!

X AI KOLs Following

WUJI 展示了其拥有 20 个关节的 WUJI Hand 2 机器人手转笔的能力。该机器人手在物理仿真器中进行训练,并通过仿真到现实迁移部署,于 IROS 2026 前后亮相。