Encore:少样本智能体式操纵策略发现

Hugging Face Daily Papers 论文

摘要

ENCORE 提出了一种少样本智能体框架,将机器人操作演示蒸馏为可供编码智能体阅读的证据包,从而自动编写策略程序,在 LIBERO-PRO 上以 96.3% 超过此前最优智能体系统,并在真实双臂机器人上完成魔方交接与杯子翻转任务。

编程智能体如今已能在很少的人类帮助下编写、运行和调试程序。然而,机器人任务通常只用一句话来描述,其中省略了如何抓取、按什么顺序接触,以及最终结果应是什么样子,而仅获得这句话的智能体必须通过试错来发现这些细节。我们提出 ENCORE,为智能体提供少量演示,供其作为证据解读,而非作为训练数据。一个确定性的构建器将每次演示提炼为一个资料包,其中包含多视角关键帧、夹爪事件、帧序列和完整轨迹。编程智能体研究该资料包,基于固定的感知与动作 API 编写策略程序,通过少量开发阶段的试运行反复改进程序,并在封闭评估前将其冻结;该评估始终不向智能体透露成功信号。在 LIBERO-PRO 上,有演示时,智能体编写的第一个程序就已能成功完成一半的扰动任务,而没有演示时只能完成一个任务;冻结后的程序也优于使用相同语言模型运行的最强既有智能体系统(96.3% 对 89.3%)。在指令未明确说明目标的 RoboDojo 任务上,没有演示时,任何程序都无法成功。ENCORE 还在真实的双臂机器人上运行,仅凭每项任务的五次演示,就能学会方块交接和杯子翻转。
查看原文
查看缓存全文

缓存时间: 2026/10/12 10:39

论文页面 - Encore:基于少量示例的智能体操作策略发现

来源:https://huggingface.co/papers/2609.37359

摘要

编程智能体如今能够在很少人工帮助的情况下编写、运行和调试程序\。然而,机器人任务通常仅用一句话描述,其中省略了如何抓取、按什么顺序接触,以及结果应当是什么样子;仅获得这句话的智能体必须通过试错来找出这些细节\。我们提出了 ENCORE,它向智能体提供少量演示,作为供其阅读的证据,而非训练数据\。一个确定性构建器将每段演示提炼为一个资料包,包含多视角关键帧、夹爪事件、帧序列和完整轨迹\。编程智能体研究该资料包,基于固定的感知与动作 API 编写策略程序,通过少量开发阶段的试运行迭代改进程序,并在封闭评估前将其冻结;该评估从不透露成功信号\。在 LIBERO-PRO 上,有演示时,智能体的首个程序就能在一半的扰动任务中成功,而没有演示时仅能在一个任务中成功;冻结后的程序优于使用相同语言模型运行的此前最强智能体系统(96.3% 对 89.3%)\。在指令未明确说明目标的 RoboDojo 任务上,没有演示时,任何程序都无法成功\。ENCORE 还可在真实双臂机器人上运行,通过每项任务五次演示学会方块交接和杯子翻转\。

查看 arXiv 页面 (https://arxiv.org/abs/2609.37359)查看 PDF (https://arxiv.org/pdf/2609.37359)项目页面 (https://yifank.github.io/encore/)GitHub2 (https://github.com/YIFANK/encore)添加到收藏集 (https://huggingface.co/login?next=%2Fpapers%2F2609.37359)

在你的智能体中获取这篇论文:

hf papers read 2609\.37359

还没有最新版 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用这篇论文的模型0

没有模型链接到这篇论文

在模型的 README.md 中引用 arxiv.org/abs/2609.37359,即可从此页面链接到该模型\。

引用这篇论文的数据集0

没有数据集链接到这篇论文

在数据集的 README.md 中引用 arxiv.org/abs/2609.37359,即可从此页面链接到该数据集\。

引用这篇论文的 Spaces0

没有 Space 链接到这篇论文

在 Space 的 README.md 中引用 arxiv.org/abs/2609.37359,即可从此页面链接到该 Space\。

收录这篇论文的收藏集0

没有收藏集收录这篇论文

将这篇论文添加到一个收藏集 (https://huggingface.co/new-collection),即可从此页面链接到该收藏集\。

相似文章

CoDA:数据引擎与动作策略的协同演化

Hugging Face Daily Papers

CoDA 提出一种仿真数据引擎与机器人动作策略协同演进的框架,通过共享失败与学习进展记忆、视觉语言诊断以及 Text2potential 分阶段势能奖励,将机器人操作任务的分布外成功率从 5.3% 提升至 27.6%,并在 LIBERO-Pro 上取得显著改善。

OpenRUA:编码代理即零样本视觉运动策略

Hugging Face Daily Papers

OpenRUA 论文提出用现成编码代理(Claude Code、Codex)直接通过原生 ROS 2 控制机器人,作为零样本视觉运动策略,在 CaP-Bench、LIBERO-PRO 和 RoboCasa365 等基准上取得显著的 SOTA 级成绩,并展现出自主编写代码提取 3D 坐标、构建控制库等涌现行为。

Skill2Real:面向零样本 Sim-to-Real 机器人操作的智能体技能学习

Hugging Face Daily Papers

Skill2Real 提出了一种基于 Proposer-Verifier-Governor 循环的智能体技能学习框架,通过共享 API 在仿真中学习可执行的机器人技能,并在无需微调的情况下将其零样本迁移到真实世界操作任务中,在 LIBERO 基准和真实机器人任务上均取得了较高的成功率。

@seclink: https://x.com/seclink/status/2067970118873993482

X AI KOLs Following

当前主流纯数据驱动机器人方案存在数据效率低、泛化性差的缺陷,新提出的神经符号物理智能范式将任务拆分为世界建模和规划两步,仅需1-10个演示即可学会新任务,泛化能力远超传统端到端方案,为通用机器人提供了更可靠的路径。