EMHO:基于经验轨迹的具身智能体框架优化

Hugging Face Daily Papers 论文

摘要

EMHO 提出一种自进化框架,在冻结具身模型的前提下,通过分析执行轨迹与历史经验自动迭代优化智能体框架(规划、上下文与工具使用),并在 EmbodiedBench 的导航与操作任务上一致提升 Qwen 9B/27B 的任务成功率。

改进具身智能体的研究通常聚焦于通过训练优化底层模型,而控制规划、上下文和工具使用的智能体框架则往往依靠人工设计。我们提出的问题是:该框架能否直接从经验轨迹中自我改进,尤其是在环境反馈稀疏的条件下。为此,我们提出 EMbodied Agent Harness Optimization(EMHO),一种自进化框架:它保持具身模型冻结不变,通过分析执行轨迹和历史框架记录来迭代修订自身的框架。EMHO 的优化不仅限于技能或恢复提示,而是涉及智能体监控进展的方式、视觉工具的使用、观测结果的语义对齐(grounding)以及对失败的响应策略。为支持以单一框架处理多个子任务,我们进一步提出 EMHO-Merge,它利用回合级别的增益与损失来指导有证据支持的修订,从而解决跨子任务联合优化共享框架时面临的权衡问题,明确修订后行为应在何时、以何种方式应用。我们在 EmbodiedBench 的导航与操作任务上对 EMHO 进行评估,结果表明 EMHO 一致地提升了 Qwen 9B 和 27B 模型的任务成功率。定性分析显示,EMHO 不仅能从失败和无效动作中恢复,更从根本上重塑了具身智能体解读和交互环境的方式。
查看原文
查看缓存全文

缓存时间: 2026/10/14 14:53

论文页面 - EMHO:通过经验轨迹优化具身智能体框架

来源:https://huggingface.co/papers/2610.08432

摘要

改进具身智能体(embodied agents)通常侧重于通过训练优化底层模型,而控制规划、上下文和工具使用的智能体框架(agent harness)通常依靠人工设计。我们探究这种框架能否直接从经验轨迹中进行自我改进,尤其是在环境反馈稀疏的条件下。我们提出EMbodied Agent Harness Optimization(EMHO),一个自进化框架:保持具身模型冻结不变,通过分析执行轨迹和历史框架迭代地修订其框架。EMHO的优化超越了技能或恢复提示,而是修改智能体监控进展、使用视觉工具、落地观测以及应对失败的方式。为支持使用单一框架处理多个子任务,我们引入EMHO-Merge,通过使用episode级别的增益与损失来引导有据可依的修订行为应用时机与方式,从而解决跨子任务联合优化单一共享框架中的权衡问题。我们在EmbodiedBench上对导航和操作任务评估EMHO,结果表明EMHO在Qwen 9B和27B模型上均持续提升任务成功率。定性分析显示,EMHO不仅能从失败和无用动作中恢复,还能重塑具身智能体解读和与环境交互的方式。

查看 arXiv 页面 (https://arxiv.org/abs/2610.08432) 查看 PDF (https://arxiv.org/pdf/2610.08432) 项目页面 (https://hyunjung00.github.io/emho/) 添加到收藏集 (https://huggingface.co/login?next=%2Fpapers%2F2610.08432)

在你的智能体中获取这篇论文:

hf papers read 2610\.08432

没有最新版 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用本文的模型 0

没有模型关联此论文

在模型 README.md 中引用 arxiv.org/abs/2610.08432 以从此页面关联。

引用本文的数据集 0

没有数据集关联此论文

在数据集 README.md 中引用 arxiv.org/abs/2610.08432 以从此页面关联。

引用本文的 Spaces 0

没有 Space 关联此论文

在 Space README.md 中引用 arxiv.org/abs/2610.08432 以从此页面关联。

包含本文的收藏集 0

没有收藏集包含本文

将本文添加到收藏集 (https://huggingface.co/new-collection) 以从此页面关联。

相似文章

基于多任务的自进化 harness:agent 作为自身的优化器

arXiv cs.AI

提出一种自进化 agent harness 框架:同一个冻结模型先作为 solver 求解任务,再作为 proposer 直接编辑自身 harness 的代码;在多任务上完成进化后,于分布外基准上显著超越 Codex(提升 12.64 分)并达到相当的表现水平。

Harness^2:面向开放世界的递归智能体框架优化

Hugging Face Daily Papers

Harness² 提出了一种即插即用的递归智能体框架(Recursive Agent Harnessing),通过任务级与框架级两层递归改进,在无 ground-truth 验证器的开放世界场景中自动优化智能体执行框架,并在多个专业基准上显著提升了 GLM-5 与 Gemini 3.5 Flash 的表现。

自我进化代理脚手架框架

Hugging Face Daily Papers

提出一个自我进化代理框架(Harness RSI),在保持模型权重固定的情况下,通过反馈驱动的修订与进化优化,持续改进代理的软件脚手架(提示、记忆、工作流和可执行组件),并借助持续 PAC 学习为泛化与保留能力提供理论保证。

HarnessX:可组合、自适应且可演进的智能体夹具工坊

Hugging Face Daily Papers

HarnessX 是一个为可组合、自适应且可演进的人工智能智能体夹具打造的工坊,它利用组合原语和轨迹驱动演化来提升智能体性能。在五项基准测试中,它平均提升了 +14.5%(最高达 +44.0%),表明运行时接口演化是模型规模扩展之外的一个互补杠杆。