新一帧仍可能错过下一个动作块
摘要
本文探讨了在动作块边界处对象状态的变化如何导致决策出现一个块的延迟，以及追踪物理变化、帧捕获、模型接收、块提交和首次改变动作如何能将捕获和传输延迟与已提交的决策分离开，但这仍然不能保证安全性或泛化能力。
在动作块边界之前改变对象，然后在其后重复。在一次运行中，下一个决策可以使用新状态。在另一次运行中，该决策可能已被提交。两次运行都能完成任务，因此最终的成功标志隐藏了一个块的延迟。LingBot-VA 2.0 报告指出，新观察结果会在动作块之间更新缓存。在同一个时钟上追踪物理变化、帧捕获、模型接收、块提交和首次改变动作的时间点。这些点可以将捕获和传输延迟与已提交的决策分开。但它们仍然不能建立安全性或泛化能力。
相似文章
边界保真的骨干模型仍需在第二帧中存活
本文探讨了在处理第一帧之后的后续视频帧时，保持骨干模型边界保真度的挑战。
活动帧：面向代理记忆与回放的确定性屏幕活动编译
本文提出了一种确定性的零模型流水线，将被动捕获的屏幕活动编译为结构化的“活动帧”用于代理记忆，将一天的原始捕获压缩为适合提示的上下文块，体积缩小86倍，并达到98.4%的问答准确率。文中还引入了例程开销比率和重复性的测量，用于对代理成本进行建模。
@svlevine: 动作分块是一种神秘而有效的方法。现代大规模模仿学习没有它基本无法工作……
Sergey Levine 重点介绍了一篇新论文，该论文探讨了为什么动作分块在现代大规模机器人模仿学习中如此有效，并剖析了其背后的原因。
何时信任想象：世界行动模型的自适应动作执行
本文介绍了 FFDC，一种用于世界行动模型的轻量级验证器，它通过检查预测观察与实际观察之间的一致性，实现了自适应动作块大小，从而提高了机器人操作的效率和鲁棒性。
无评估可捕捉的智能体失败模式：使用缓存的过时事实
讨论AI智能体可靠性中的一个盲点：缓存在获取时是真实的事实，但在使用时已经过时，导致一致但不正确的行为。提出将一致性（与源匹配）与时效性（源目前仍然真实）分开，并询问社区如何处理这个问题。