苏格拉底式技能学习:通过教学与实践交错实现可迁移代理技能

Hugging Face Daily Papers 论文

摘要

该论文提出 Socratic Skill Learning (SSL),通过将专家教学与学生实践交错进行,使 LLM 代理获得可迁移的可复用技能,并构建了 SkillTransferBench 基准测试,结果显示其在效用指标上优于轨迹蒸馏与对比蒸馏方法。

Agent Skills 通过使任务知识在不同会话间可复用来提升 LLM 代理的能力。学习可迁移的 Skill 需要了解一个操作流程及其适用条件,而一次成功的任务尝试可能无法充分验证这些信息。我们提出 Socratic Skill Learning (SSL),将专家教学与学生实践交错进行。Educator 引导探究过程,而 Student 是唯一的环境操作者和 Skill 撰写者,能够对建议进行提问、测试和调整。为测试 Skill 在学习任务之外的复用能力,我们构建了 SkillTransferBench,包含 35 个任务族和 408 个可执行案例,将公开的变体规格与在全新求解器会话中的留出评估相结合。在主要的 22 个任务族、155 个案例的测试组上,Fixed-Window SSL 达到 0.801 的效用,而无 Skill 时为 0.723,改编版 Trace2Skill(轨迹蒸馏)为 0.761,改编版 SKILL-KD(对比蒸馏)为 0.751。在共享任务族上对三组模型的实验中,交错式指导优于专家撰写和事后教学。过程分析揭示了指导与 Student 撰写及包修订之间的关联;一个案例研究展示了 Student 对提出的流程进行测试和优化以供后续复用的过程。随着对新课程的需求减少,固定窗口审查的成本逐渐上升。Issue-Guided SSL 通过跟踪 Skill 修订过程中未解决的问题来选择和聚焦审查内容,在主要测试组上达到 0.805 的效用,相比 Fixed-Window SSL 减少了 61.7% 的 Educator token 和 16.9% 的总获取 token。
查看原文
查看缓存全文

缓存时间: 2026/10/22 15:43

论文页面 - 苏格拉底式技能学习:通过教学与实践交替实现可迁移的智能体技能

来源:https://huggingface.co/papers/2610.17860

作者:

,

,

,

,

,

,

,

,

,

摘要

苏格拉底式技能学习通过将专家指导与学生练习及针对性复习交替进行,提升可复用的智能体技能,其效果优于轨迹蒸馏和对比蒸馏方法。

智能体技能(Agent Skills)通过使任务知识在不同会话间可复用来提升 LLM 智能体的能力。学习可迁移的技能需要关于某个流程及其适用条件的证据,而一次成功的任务尝试可能无法充分验证这些条件。我们提出苏格拉底式技能学习(Socratic Skill Learning,SSL),将专家教学与学生练习交替进行。教育者(Educator)引导探究过程,而学生(Student)是唯一的环境操作者和技能作者,能够对建议进行提问、测试和调整。为测试技能在学习任务之外的复用能力,我们构建了 SkillTransferBench,包含 35 个任务族和 408 个可执行案例,将公开的变化规格与在全新求解器会话中的留出评估相结合。在主要的 22 个任务族、155 个案例的测试集上,固定窗口 SSL 达到 0.801 的效用值,相比之下,无技能时为 0.723,改进后的 Trace2Skill(轨迹蒸馏)为 0.761,改进后的 SKILL-KD(对比蒸馏)为 0.751。在共享任务族上的三组模型配对中,交替指导的效果优于专家直接编写和事后教学。过程分析将指导与学生撰写及技能包修改相关联;一个案例研究表明,学生会测试并优化建议的流程以供后续复用。随着对新课程需求的下降,固定窗口复习的成本会不断增长。问题引导 SSL(Issue-Guided SSL)跟踪技能修订过程中未解决的问题,以选择和聚焦复习内容,在主要测试集上达到 0.805 的效用值,相比固定窗口 SSL 教育者 token 消耗减少 61.7%,总获取 token 消耗减少 16.9%。

查看 arXiv 页面 (https://arxiv.org/abs/2610.17860) 查看 PDF (https://arxiv.org/pdf/2610.17860) GitHub2 (https://github.com/NJU-LINK/Socratic-Skill-Learning) 添加到收藏集 (https://huggingface.co/login?next=%2Fpapers%2F2610.17860)

在你的智能体中获取这篇论文:

hf papers read 2610.17860

还没有最新版 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用本论文的模型:0

没有模型链接本论文

在模型 README.md 中引用 arxiv.org/abs/2610.17860 以从本页面链接它。

引用本论文的数据集:1

NJU-LINK/SkillTransferBench RL 环境 • 更新于 6 天前 • 707 • 274 • 3 (https://huggingface.co/datasets/NJU-LINK/SkillTransferBench)

引用本论文的 Spaces:0

没有 Space 链接本论文

在 Space README.md 中引用 arxiv.org/abs/2610.17860 以从本页面链接它。

包含本论文的收藏集:0

没有收藏集包含本论文

将本论文添加到收藏集 (https://huggingface.co/new-collection) 以从本页面链接它。

相似文章

SKILL-KD:面向LLM智能体的对比技能蒸馏

Hugging Face Daily Papers

SKILL-KD是一种对比技能蒸馏框架,通过将教师轨迹与学生轨迹之间的可操作差异蒸馏为文本技能补丁,并利用漂移感知合并机制迭代优化技能,从而提升LLM智能体的性能。