VLA-Corrector:一种用于自适应动作视野的轻量级检测与纠正推理框架
摘要
VLA-Corrector 提出了一种轻量级的检测与纠正推理框架,可在无需重新训练的情况下自适应调整视觉-语言-动作策略中的动作视野,提升机器人操控任务的鲁棒性和效率。
查看缓存全文
缓存时间: 2026/07/06 06:35
论文页面 - VLA-Corrector:用于自适应动作时域窗口的轻量级检测与纠正推理框架
来源:https://huggingface.co/papers/2607.01804 我们提出 VLA-Corrector,一种轻量级的检测与纠正推理框架,用于处理基于动作分块的视觉-语言-动作(Vision-Language-Action)策略。
图片(https://cdn-uploads.huggingface.co/production/uploads/6485bd278d14bcd5cdbb7c8d/CCBNIokHqVaR371A1eYlb.png)
现代 VLA 策略通常会预测并执行动作分块,以降低策略调用频率并提升时间平滑度。然而,这种固定时域窗口的执行方式存在开环盲区:当物体滑落、机器人位姿漂移或场景在执行过程中发生变化时,策略可能会在执行完过期动作后才再次查询模型。
VLA-Corrector 无需重新训练或修改 VLA 主干网络即可解决该问题。它增加了一个轻量级的外部纠正通路,用于在执行过程中监控潜在视觉动态。当观测到的视觉演变持续偏离预期时,VLA-Corrector 会中断当前动作分块,丢弃过期动作,并触发带有在线梯度引导的纠正性重新规划。
这将固定的动作时域窗口转变为自适应窗口:当分块仍可靠时保留长时域执行,当执行开始漂移时则激活短时域的纠正行为。
在 MetaWorld、LIBERO 以及真实世界的 AgileX PiPER 实验中,VLA-Corrector 在多种 VLA 主干网络上提升了鲁棒性和每次调用的成功效率,表明小型推理时模块能够为可靠的机器人操作带来有意义的增益。
项目页面:https://zju-omniai.github.io/vla-corrector/
GitHub:https://github.com/ZJU-OmniAI/vla-corrector
论文:https://arxiv.org/abs/2607.01804
联系:Yi Pan:[email protected] Wenqi Zhang:[email protected]
相似文章
视觉思考-视觉-语言-行动策略:视觉中间推理实现高效低延迟
视觉思考-视觉-语言-行动策略(VisualThink-VLA)引入了一种用于视觉-语言-行动策略的视觉中间推理框架,该框架保留了空间精度,并相比基于文本的推理显著降低了延迟,在机器人操作基准测试中实现了亚秒级推理和领先的成功率。
AR-VLA: 面向视觉-语言-动作模型的真正自回归动作专家
提出了AR-VLA,一个自回归动作专家,它通过长期记忆生成连续的、具有上下文感知能力的机器人策略训练的动作序列,相比反应式VLA模型,提高了轨迹平滑度和任务成功率。
克服动态盲视:面向VLA模型的免训练Pace-and-Path Correction
提出一种免训练推理时方法,用于VLA模型校正步调与路径动态,在动态环境中将成功率最高提升28.8%。
IntentVLA: 针对混叠机器人操作的短期意图建模
IntentVLA 是一种历史条件视觉-语言-动作框架,通过从视觉观察中编码短期意图来提高机器人模仿学习的稳定性,解决了部分可观察性和模糊观察带来的挑战。它还引入了 AliasBench,这是一个用于评估此类方法的模糊感知基准。
AffordanceVLA: 一种通过可供性感知理解赋能动作生成的视觉-语言-动作模型
AffordanceVLA引入了一个统一框架,利用结构化可供性预测作为中间表示,结合视觉-语言模型和混合Transformer架构,以改进机器人操作中的感知-动作映射。