Advanced dexterity with Gemini Robotics 2

TL;DR: Gemini Robotics 2 展示了机器人完成装葡萄入袋、拧灯泡、移动工具和打结等精细操作，体现了高精度与灵巧性。 ## 概述 为了让机器人在真实世界中发挥作用，它们需要具备人类习以为常的灵巧性。我们使用双手时很少思考如何驱动22个独立关节，但这正是我们要求AI模型完成的任务。在Gemini Robotics项目中，我们设计了一系列任务来测试和开发这种灵巧性。 ## 装午餐：葡萄与密封袋 我们要求机器人将葡萄放入密封袋中，以此装好午餐。 > “这需要极高的精度，也需要很好的协调能力。” 机器人需要小心翼翼地放置葡萄，并确保不压坏它们。操作中最困难的部分是拉上密封袋的封口。最终机器人完成了任务，研究人员称赞道：“干得好，阿波罗。” ## 拧灯泡的挑战 下一个任务是拧下灯泡。研究人员演示道：“嘿，阿波罗，你能拧下灯泡吗？”灯泡实际上是一个球体，指尖与灯泡的接触必须非常精准才能将其旋出。实际进行这个动作时，涉及大量运动与灵巧操作——机器人需要旋转、推、拉，理解所有这些动作的配合。这其实非常复杂。完成任务后，机器人得到了“谢谢你，阿波罗”的反馈。 ## 平行夹爪的灵巧操作 即使使用平行夹爪，我们也在推进机器人的能力。要完成这类任务，必须具备灵巧性、精确度以及对三维空间的理解，这正是我们试图解决的难题。机器人可以移动工具包，挪动工具。它将能理解如何重新定位空间中的物体，然后精准地将它们放入指定位置。 ## 垃圾分类：打结任务 另一个挑战是让机器人打一个结，系住垃圾袋。多指手是实现此类复杂打结灵巧操作的关键要素。研究人员鼓励道：“加油，机器人，你能行。”最终机器人成功完成，获得“干得好，阿波罗”的评价。 我们正在深化对机器人如何与真实世界中复杂物体（如垃圾袋或危险废弃物）互动的理解。如果能派机器人去做这些事，而不是让人类冒险，那就太棒了。 ## 总结与展望 通过一系列从精细抓取到复杂打结的测试，Gemini Robotics 2 展示了AI驱动的机器人正在逐步掌握人类习以为常的灵巧操作。未来，这些能力有望应用于危险环境下的废弃物处理、精密组装等场景，让机器人代替人类承担风险。 Source: https://www.youtube.com/watch?v=O9-650iHAls