无显式轨迹下3D扩散策略的预见性学习
摘要
引入Movement Trend Guidance以增强机器人操作中的3D扩散策略,通过无显式轨迹提供预见性,在RoboTwin2.0和LIBERO-40等基准测试上实现性能提升。
查看缓存全文
缓存时间: 2026/09/21 03:21
论文页面 - 无需显式轨迹的3D扩散策略前瞻学习
来源:https://huggingface.co/papers/2609.20669
摘要
3D扩散策略擅长从当前观测中生成几何感知的动作,但成功的机械操作不仅需要知道当前可行的运动,还需要预判交互的后续发展。现有策略大多将这种前瞻性隐式地寄托于动作学习过程。我们引入了运动趋势引导(Movement Trend Guidance),这是一种简单有效的方法,能在不引入显式规划的前提下提供这种前瞻性。策略从短暂的观测历史中,学习交互演化的紧凑隐空间表征。训练时,稀疏的未来抓取器状态监督该表征的学习;推理时,仅保留该隐变量作为面向未来的条件,与当前观测一同输入。隐变量为动作生成提供全局条件约束,而额外的门控FiLM分支仅用于UNet的瓶颈层。尽管仅在DP3基础上增加3.52%的参数,本方法保留了原始的密集动作与滚动时域设计,并在RoboTwin 2.0、LIBERO-40和DexArt任务上持续优于DP3。在50任务的RoboTwin 2.0混合训练中达到62.8%(对比基线56.1%),在LIBERO-40上达到71.93%(对比37.08%),在五个真实机器人任务上达到72.0%(对比49.0%)。这些结果表明,扩散策略能从“知晓交互走向何处”的信息中显著获益,而无需明确指定移动目标。
查看arXiv页面 (https://arxiv.org/abs/2609.20669) 查看PDF (https://arxiv.org/pdf/2609.20669) 项目页面 (https://github.com/zhangzhongbo2213/movement-trend-guidance) GitHub (https://github.com/zhangzhongbo2213/movement-trend-guidance) 添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2609.20669)
通过智能体获取本文:
hf papers read 2609\.20669
尚未安装最新CLI?请执行 curl \-LsSf https://hf\.co/cli/install\.sh \| bash
引用本文的模型0
无模型链接本文
在模型README.md中引用 arxiv.org/abs/2609.20669 以从本页面链接。
引用本文的数据集0
无数据集链接本文
在数据集README.md中引用 arxiv.org/abs/2609.20669 以从本页面链接。
引用本文的Spaces0
无Space链接本文
在Space README.md中引用 arxiv.org/abs/2609.20669 以从本页面链接。
包含本文的收藏0
无收藏包含本文
将本文添加到收藏 (https://huggingface.co/new-collection) 以从本页面链接。
相似文章
Foresight: 长时域机器人操作中基于动作条件的世界模型潜在表示的故障检测
Foresight 是一个用于长时域机器人操作的故障检测框架,它利用基于动作条件的世界模型潜在表示和功能性保形预测来监控轨迹,仅使用最终任务标签进行训练。在仿真和真实机器人任务中均展示了最先进的性能。
从噪声到控制:Parameterized Diffusion Policies
本文介绍了参数化扩散策略(Parameterized Diffusion Policy, PDP)框架,该框架通过以低维潜在参数为条件,使扩散策略变得可控,从而实现无需重新训练即可进行平滑的行为插值和自适应。在仿真和真实机器人实验中,该方法在复杂的多模态机器人任务上展现了更优的性能。
频率引导的子频率流形遍历动作扩散
本文介绍了频率引导算子(Frequency Guidance Operator, FGO),一种用于扩散策略的方法,通过引导噪声样本通过中间子频率流形来平滑动作生成,从而提升机器人操作任务的性能。
面向轨迹跟踪的预期强化学习
本文提出了一种预测性深度强化学习公式,通过将未来参考视界加入状态空间,实现轨迹跟踪的预期控制。仿真结果显示误差显著降低,但零样本迁移到物理硬件时暴露了仿真与现实的差距。
RoboTALES:通过任务对齐的模拟未来学习推理引导的机器人策略
RoboTALES引入了一个两阶段框架,结合基于LLM的规划和基于VLM的批评,以改进任务对齐的视频生成和机器人策略训练,在长时域操作任务上显著优于现有方法。