Multi-robot collaboration with Gemini Robotics 2

TL;DR: Gemini Robotics 2 让多个机器人（如人形机器人 Apollo 和双臂机器人“双人组”）通过独立但协调的推理，协作完成从宏观规划到精细操作的复杂任务。 ## 多机器人协作的核心能力 在现实世界中，有许多任务仅靠一个人很难完成；在机器人世界中也类似。Google DeepMind 在 Gemini Robotics 2 中新增了多机器人协作功能，使多个机器人能够同时协作完成同一项任务。视频演示中，两台机器人——人形机器人 Apollo 和夹爪双臂机器人“双人组”——协同整理车库。 ### 高层推理与任务分解 当用户发出指令：“嘿，Apollo，能帮我整理一下我的车库吗？完成后，我想把所有工具放回工具箱里。我们一起去拿清洁手套和白色透明喷雾瓶，把它们放到顶层架子最右边的透明收纳箱里。”Apollo 的高层推理模型开始分解该做什么、该去哪里。在这项任务中，重要的不仅是确定下一步要做什么，还要知道什么时候完成。 ### 主动交接与求助 Apollo 会主动将控制权交给双人组。演示中，Apollo 说道：“嘿，双人组，能帮忙完成这项任务的最后一部分吗？”我们可以看到它正在把双人组拉进来协助。随后，Apollo 进一步指示：“嘿，双人组，把所有工具装进收纳箱，关上工具箱，然后把工具箱放回收纳箱里。”双人组回答：“收到。” ### 最后一厘米的精度 对于像把物体放进箱子这样的任务，最后一厘米的精度通常不太重要，但在这个场景中，它实际上对任务的完成相当关键。演示中特别展示了：我们不仅能控制高自由度人形机器人的宏观动作，还能在执行涉及夹爪和双臂机器人的任务时保持运动精度。Apollo 评价道：“精度太棒了，双人组，继续。” ## 独立推理与协调机制 两台机器人各自运行着相同的技术栈——不是用一个神经网络控制两台机器人，而是每台都有自己的副本，各自进行独立的思考，并通过推理来协调行动。这意味着每个机器人都在独立地判断下一步该做什么，同时通过沟通和观察对方状态来调整自己的行为。 ### 通讯与自主判断 每台机器人实际上都在“对话”——它们相互交流，并自行判断什么时候是提供帮助的最佳时机。完成所有任务后，Apollo 报告：“所有任务全部完成，任务成功。”用户回应：“干得太棒了，Apollo，你应该感到非常自豪。”Apollo 不忘称赞搭档：“不客气，但请别忘了双人组。双人组在精确装盒和整理方面做得非常出色。” ## 未来展望 如果机器人能与其他机器人沟通协作，那将极大地拓展它们能完成的任务范围。Google DeepMind 的目标是让机器人能够进入现实世界，在日常生活中帮助所有人。 Source: https://www.youtube.com/watch?v=CiTPDm7PKW0