VLA-Rolling:更少的去噪步数,借助自适应动作复用获得更优控制
摘要
VLA-Rolling 是一个轻量级推理框架,通过自适应去噪预算复用流匹配 VLA 模型中被丢弃的动作尾部,在 LIBERO、MetaWorld、LIBERO-Plus 和 RoboTwin 2.0 上的 16 组模型-基准组合中,实现了最高 1.48 倍的加速和最高 15.08 个百分点的成功率提升。
查看缓存全文
缓存时间: 2026/10/21 07:02
论文页面 - VLA-Rolling:更少的去噪步数,通过自适应动作复用实现更优控制
来源:https://huggingface.co/papers/2610.25043 作者:
,
,
,
,
,
,
,
,
,
,
,
摘要
VLA-Rolling 通过自适应去噪预算复用被丢弃的动作尾部,提升视觉-语言-动作模型的效率,降低推理成本并提高成功率。
基于流匹配(Flow-matching,https://huggingface.co/papers?q=Flow-matching)的视觉-语言-动作(VLA)模型通过迭代去噪(https://huggingface.co/papers?q=denoising)高斯噪声(https://huggingface.co/papers?q=Gaussian%20noise)来生成动作块(action chunk,https://huggingface.co/papers?q=action%20chunk),但通常只执行一小段前缀,随后便用更新后的观测进行重新规划。在这种滚动时域(receding-horizon,https://huggingface.co/papers?q=receding-horizon)范式下,未被执行的剩余部分——即动作尾部——被丢弃,下一个动作块则从全新的噪声中重新生成。我们证明,被丢弃的动作尾部保留了可迁移的去噪进度:动作尾部初始化(action-tail initialization,https://huggingface.co/papers?q=action-tail%20initialization)能够以更少的去噪步数达到甚至超越原生 10 步高斯基线的性能。然而,最优的去噪预算在不同样本之间差异显著,表明尾部复用应根据更新后的环境进行自适应调整。基于这一观察,我们提出了 VLA-Rolling(https://huggingface.co/papers?q=VLA-Rolling)——一个轻量级推理框架,通过三个阶段复用动作尾部:动作尾部继承、逐动作置信度估计(confidence estimation,https://huggingface.co/papers?q=confidence%20estimation),以及通过再加噪(renoising,https://huggingface.co/papers?q=renoising)和去噪预算分配进行置信度引导的精炼,同时底层 VLA 模型保持冻结。在 LIBERO、MetaWorld、LIBERO-Plus 和 RoboTwin 2.0 基准测试中,针对 π_{0.5}、SmolVLA、X-VLA 和 MolmoAct2 模型,VLA-Rolling(https://huggingface.co/papers?q=VLA-Rolling)在全部 16 个模型-基准组合中均降低了动作块推理成本,最高实现 1.48 倍加速,同时在 14 个组合中将成功率提升最多 15.08 个百分点。这些结果表明,动作尾部并非仅仅是被丢弃的预测,而是可复用的中间状态,能够实现更高效、更准确的 VLA 推理。这些结果也表明,动作尾部能够以更少的去噪步数支持生成更优的动作。我们的项目地址为:https://chenbao123ww.github.io/VLA-Rolling(https://huggingface.co/papers?q=VLA-Rolling)。
查看 arXiv 页面(https://arxiv.org/abs/2610.25043) | 查看 PDF(https://arxiv.org/pdf/2610.25043) | 项目页面(https://chenbao123ww.github.io/VLA-Rolling/) | GitHub6(https://github.com/ZJU-OmniAI/VLA-Rolling) | 添加到收藏夹(https://huggingface.co/login?next=%2Fpapers%2F2610.25043)
在您的 Agent 中获取此论文:
hf papers read 2610.25043
尚未安装最新 CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用本文的模型 1
Chenbao77/VLA-Rolling 机器人学 • 约 5 小时前更新(https://huggingface.co/Chenbao77/VLA-Rolling)
引用本文的数据集 0
暂无关联数据集
在数据集 README.md 中引用 arxiv.org/abs/2610.25043 即可从此页面链接。
引用本文的 Spaces 0
暂无关联 Space
在 Space README.md 中引用 arxiv.org/abs/2610.25043 即可从此页面链接。
包含本文的收藏夹 0
暂无包含本文的收藏夹
将此论文添加到收藏夹(https://huggingface.co/new-collection)即可从此页面链接。
相似文章
RL^2-VLA:面向视觉-语言-动作模型的自适应强化学习潜在组合引导与测试时缩放
本文介绍了RL^2,一种用于视觉-语言-动作模型的自适应推理时引导框架,它利用潜在表示上的离线强化学习来组合动作流,并且仅在预测到失败时激活引导。在SIMPLER和PolaRiS基准上,它实现了最高+17.3%的成功率提升,并展示了真实世界的迁移能力。
D-VLA: 面向视觉-语言-动作模型的高并发分布式异步强化学习框架
D-VLA 提出了一种高并发分布式异步强化学习框架,用于视觉-语言-动作模型,采用平面解耦和泳道管线提升大规模具身智能训练中的吞吐量和效率。
从基础到应用:在实践中改进VLA模型
本文介绍了LingBot-VLA 2.0,它通过改进跨任务和具身形态的泛化能力、将动作空间扩展至全身自由度,并引入预测动力学建模以提升时间推理能力,从而增强了用于机器人技术的VLA基础模型。
AR-VLA: 面向视觉-语言-动作模型的真正自回归动作专家
提出了AR-VLA,一个自回归动作专家,它通过长期记忆生成连续的、具有上下文感知能力的机器人策略训练的动作序列,相比反应式VLA模型,提高了轨迹平滑度和任务成功率。
早期判决,更优预算:面向计算高效RLVR的顺序自适应rollout分配
本文提出SARA,一种面向RLVR的顺序自适应rollout分配方法,该方法提前放弃饱和组并重新分配预算,相比动态采样,在rollout数量减少22%的情况下达到相当精度,若与之结合则可节省高达67%。