关于这个机器人在1倍速下从移动传送带上抓取物体,有什么看法?

Reddit r/artificial 模型

摘要

一个使用LingBot-VA 2.0视频动作模型的机器人,以1倍速实时从移动传送带上抓取物体,它预测未来运动而不仅仅是反应当前帧。

在深入探索机器人控制的过程中发现了这个,它让我印象深刻。传送带一直在移动,所以目标从来不会静止,这通常是导致机器人反应滞后或抓取失败的原因。但这款机器人通过预测场景即将发生的变化并据此行动,然后在每个新的摄像头帧上进行校正,而不是只对当前时刻做出反应。它使用的视频动作模型叫LingBot-VA 2.0。视频是1倍速无剪辑,所以没有加速。我会在评论中附上来源和真实的限制,而不是在这里过度宣传。好奇这里的人怎么看。
查看原文

相似文章

IntentVLA: 针对混叠机器人操作的短期意图建模

Hugging Face Daily Papers

IntentVLA 是一种历史条件视觉-语言-动作框架,通过从视觉观察中编码短期意图来提高机器人模仿学习的稳定性,解决了部分可观察性和模糊观察带来的挑战。它还引入了 AliasBench,这是一个用于评估此类方法的模糊感知基准。