HaMo:框架与模型协同的长程持续学习

Hugging Face Daily Papers 论文

摘要

HaMo 是一个框架与模型协同(Harness-Model)的框架,将策略级经验卡片的快速检索与渐进式参数化适应相结合,以提升长程 Web 智能体的记忆保持与跨任务执行能力,在领域偏移场景下优于仅依赖框架或仅依赖模型的方法。

长程智能体在运行过程中不断遇到可复用的程序性知识,然而现有系统通常要么依赖模型适应,要么依赖外部记忆,往往在持久学习与快速复用之间做出取舍。这一局限在 Web 智能体中尤为关键,因为它们需要反复执行相关的多步骤工作流。我们提出 HaMo,一个框架与模型协同(Harness-Model)的框架,将快速的非参数化经验积累与缓慢的参数化适应相结合。HaMo 将执行轨迹提炼为策略级经验卡片以供即时检索,同时通过一种基于经验条件的持续学习目标,训练模型对检索到的策略进行理解、定位与跨情境执行。此外,我们还引入了一种基于检索覆盖率的选择机制,用于识别紧凑且互补的轨迹以进行参数更新。实验结果表明,在领域内和跨领域偏移条件下,HaMo 均优于仅依赖框架或仅依赖模型的适应方法,同时提升了记忆保持与适应能力。这些结果凸显了联合保留程序性经验,并将迁移与执行能力内化到模型中的重要性。
查看原文
查看缓存全文

缓存时间: 2026/10/28 05:28

论文页面 - Harness-Model 协同的长时程持续学习

来源:https://huggingface.co/papers/2610.34724 发布于 10 月 26 日

·

由 https://huggingface.co/bizhen 提交

bizhen (https://huggingface.co/bizhen) 于 10 月 28 日发布

摘要

HaMo 结合了程序性经验卡的快速检索与模型的渐进式适配,旨在提升长时程 Web 智能体的记忆保持能力与跨任务执行能力。

长时程智能体在运行过程中会不断遇到可复用的程序性知识,但现有系统通常要么依赖模型适配,要么依赖外部记忆,难以兼顾持续学习与快速复用。这一局限对于需要反复执行相关多步工作流的 Web 智能体尤为重要。我们提出了 HaMo——一个 Harness-Model 协同框架,将快速的非参数化经验累积与慢速的参数化适配相结合。HaMo 将轨迹提炼为策略层面的经验卡以支持即时检索,同时通过基于经验的持续学习目标训练模型,使其能够在不断变化的上下文中解读、落地并执行检索到的策略。此外,一种基于检索覆盖率的选择机制能够进一步筛选出精简且互补的轨迹用于参数更新。实验表明,在领域内和跨领域迁移场景下,HaMo 均优于仅依赖 harness 或仅依赖模型适配的方案,在记忆保持与快速适配两方面均有提升。这些结果凸显了同时保留程序性经验并将跨任务迁移与执行的能力内化到模型中的重要性。

查看 arXiv 页面 (https://arxiv.org/abs/2610.34724) 查看 PDF (https://arxiv.org/pdf/2610.34724) 添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2610.34724)

引用该论文的模型 0

暂无模型关联此论文

在模型的 README.md 中引用 arxiv.org/abs/2610.34724 即可在此页面建立关联。

引用该论文的数据集 0

暂无数据集关联此论文

在数据集的 README.md 中引用 arxiv.org/abs/2610.34724 即可在此页面建立关联。

引用该论文的 Spaces 0

暂无 Space 关联此论文

在 Space 的 README.md 中引用 arxiv.org/abs/2610.34724 即可在此页面建立关联。

包含该论文的合集 0

暂无合集包含此论文

将该论文添加到合集即可在此页面建立关联。

相似文章

面向长时程终端Agent的Harness自进化

arXiv cs.AI

论文提出了由腾讯与多所高校联合研发的RiseHarness框架,该框架在保持模型权重不变的前提下,通过迭代优化智能体的Harness来处理长时程终端任务,分析成功与失败的执行记录,逐步整合更优的执行机制。

Self-Harness: 自我改进的Harness

Hacker News Top

Self-Harness 提出了一种新范式,其中基于LLM的智能体通过挖掘模型特定的弱点、提出框架修改,并通过回归测试验证这些修改,从而迭代地改进自身的运行框架,在Terminal-Bench-2.0上跨多个基础模型取得了显著的性能提升。

KPHarness:面向长时程游戏执行框架的知识与主动探测协同演化

arXiv cs.AI

KPHarness 提出了一种框架,通过协同演化恢复知识与主动探测策略,为冻结的视觉-语言-动作模型调整外部执行框架,以应对长时程 Minecraft 任务,从而在不进一步更新底层策略模型的情况下,提升任务覆盖率以及对未见任务的迁移能力。