通过跨框架适配实现检索增强的技能优化

Hugging Face Daily Papers 论文

摘要

该论文提出 RASO(检索增强技能优化)框架,通过 Cross-Harness Adaptation 从外部技能语料库中检索先验知识来初始化和迭代优化 agent 技能,在四个 agent 基准和两个模型上显著优于无检索增强的基线方法。

Agent 技能是一种可复用、可执行的自然语言工件,用于指导 agent 在特定运行框架(harness)下高效地完成任务。近期的研究探索了 agent 技能的优化方法,并逐步积累了一批公开可用的技能,涵盖多样的任务、领域和框架。尽管公开共享的技能已达数百万之多,现有的技能优化方法在很大程度上忽视了这些积累下来的知识,仅依赖成本高昂的 agent rollout 来针对目标任务迭代打磨技能。为此,我们提出了检索增强技能优化(Retrieval-Augmented Skill Optimization,简称 RASO),该框架在整个技能优化过程中利用外部技能语料库作为先验知识。RASO 从已有技能中检索相关知识,并通过跨框架适配(Cross-Harness Adaptation)将其适配到目标任务与框架上,同时兼顾领域和框架层面的不匹配问题。RASO 包含两个互补阶段:检索增强技能初始化(Retrieval-Augmented Skill Initialization,RASI)无需 agent rollout 即可构建有知识依据的初始技能;检索增强技能更新(Retrieval-Augmented Skill Update,RASU)则在执行反馈的引导下检索外部知识,对技能进行迭代优化。在四个 agent 基准和两个模型上的大量实验表明,RASO 持续优于那些不采用检索增强技能初始化与更新的基线方法。
查看原文
查看缓存全文

缓存时间: 2026/10/02 04:28

论文页面 - 通过跨 Harness 适配的检索增强技能优化

来源:https://huggingface.co/papers/2609.38024 作者:

,

,

,

,

,

,

,

,

,

摘要

Agent 技能(Agent Skill)是一种可复用、可操作的自然语言工件,用于引导 agent 在给定的 harness 下高效执行任务。近期的研究探索了 agent 技能的优化方法,促成了一个不断增长的公开技能集合,涵盖多样的任务、领域和 harness。尽管公开共享的技能已达数百万之多,现有技能优化方法在很大程度上忽略了这些积累的知识,而是仅依赖代价高昂的 agent rollout 来为特定任务迭代改进技能。为此,我们提出了 Retrieval-Augmented Skill Optimization(RASO),一个在整个技能优化过程中利用外部技能语料库作为先验知识的框架。RASO 从现有技能中检索相关知识,并通过 Cross-Harness Adaptation 将其适配到目标任务和 harness,同时兼顾领域与 harness 两方面的不匹配问题。RASO 包含两个互补阶段:Retrieval-Augmented Skill Initialization(RASI)无需 agent rollout 即可构建以知识为基础的初始技能,而 Retrieval-Augmented Skill Update(RASU)则在执行反馈的引导下,通过检索外部知识来迭代改进技能。在四个 agent 基准测试和两个模型上的大量实验表明,RASO 一致优于未采用检索增强技能初始化和更新的基线方法。

查看 arXiv 页面 (https://arxiv.org/abs/2609.38024) 查看 PDF (https://arxiv.org/pdf/2609.38024) 添加到收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2609.38024)

引用本论文的模型 0

暂无模型关联本论文

在模型 README.md 中引用 arxiv.org/abs/2609.38024 即可从本页面链接到该论文。

引用本论文的数据集 0

暂无数据集关联本论文

在数据集 README.md 中引用 arxiv.org/abs/2609.38024 即可从本页面链接到该论文。

引用本论文的 Spaces 0

暂无 Space 关联本论文

在 Space README.md 中引用 arxiv.org/abs/2609.38024 即可从本页面链接到该论文。

收录本论文的合集 0

暂无合集收录本论文

将本论文添加到合集 (https://huggingface.co/new-collection) 即可从本页面链接到该论文。

相似文章

随能力演进:通过技能适配改进框架的自我演化

arXiv cs.LG

该论文提出技能适配(skill adaptation)方法,通过元技能引导外部改写器将现有技能重写以匹配执行模型的能力,从而提升弱模型在 harness 自演化中的表现,并在七个模型上验证了改进效果。

为匹配能力而演进:通过技能适配改进运行框架的自我演进

Hugging Face Daily Papers

论文提出通过技能适配(skill adaptation)改进 LLM 代理的 harness 自进化:用一个固定的 meta-skill 指导将现有技能改写为符合执行器能力的形式,使弱模型在无需参数更新的情况下获得显著提升,在七个模型和三个基准上验证了有效性。

用于递归自我改进的 Google Harness²(GitHub 仓库)

TLDR AI

Google Research 开源了 Harness²,这是一个实现递归式智能体框架优化的即插即用框架。它可在模型权重固定的情况下,通过“提出–探测–组合”循环持续改进智能体运行框架,在多个专业基准测试中带来最高 11.8 个百分点的性能提升。

基于多任务的自进化 harness:agent 作为自身的优化器

arXiv cs.AI

提出一种自进化 agent harness 框架:同一个冻结模型先作为 solver 求解任务,再作为 proposer 直接编辑自身 harness 的代码;在多任务上完成进化后,于分布外基准上显著超越 Codex(提升 12.64 分)并达到相当的表现水平。

训练整个智能体,而不仅仅是模型

Hugging Face Daily Papers

HarnessAdapt-RL 联合训练编码策略并自适应调整其评估框架(harness),通过机制级技能和不断演化的工具,在 9B 基座模型上将 SWE-bench 各变体上的 pass@1 相比 GRPO 最高提升 12.6 个百分点。