苏格拉底式技能学习:通过教学与实践交错实现可迁移代理技能
摘要
该论文提出 Socratic Skill Learning (SSL),通过将专家教学与学生实践交错进行,使 LLM 代理获得可迁移的可复用技能,并构建了 SkillTransferBench 基准测试,结果显示其在效用指标上优于轨迹蒸馏与对比蒸馏方法。
查看缓存全文
缓存时间: 2026/10/22 15:43
论文页面 - 苏格拉底式技能学习:通过教学与实践交替实现可迁移的智能体技能
来源:https://huggingface.co/papers/2610.17860
作者:
,
,
,
,
,
,
,
,
,
摘要
苏格拉底式技能学习通过将专家指导与学生练习及针对性复习交替进行,提升可复用的智能体技能,其效果优于轨迹蒸馏和对比蒸馏方法。
智能体技能(Agent Skills)通过使任务知识在不同会话间可复用来提升 LLM 智能体的能力。学习可迁移的技能需要关于某个流程及其适用条件的证据,而一次成功的任务尝试可能无法充分验证这些条件。我们提出苏格拉底式技能学习(Socratic Skill Learning,SSL),将专家教学与学生练习交替进行。教育者(Educator)引导探究过程,而学生(Student)是唯一的环境操作者和技能作者,能够对建议进行提问、测试和调整。为测试技能在学习任务之外的复用能力,我们构建了 SkillTransferBench,包含 35 个任务族和 408 个可执行案例,将公开的变化规格与在全新求解器会话中的留出评估相结合。在主要的 22 个任务族、155 个案例的测试集上,固定窗口 SSL 达到 0.801 的效用值,相比之下,无技能时为 0.723,改进后的 Trace2Skill(轨迹蒸馏)为 0.761,改进后的 SKILL-KD(对比蒸馏)为 0.751。在共享任务族上的三组模型配对中,交替指导的效果优于专家直接编写和事后教学。过程分析将指导与学生撰写及技能包修改相关联;一个案例研究表明,学生会测试并优化建议的流程以供后续复用。随着对新课程需求的下降,固定窗口复习的成本会不断增长。问题引导 SSL(Issue-Guided SSL)跟踪技能修订过程中未解决的问题,以选择和聚焦复习内容,在主要测试集上达到 0.805 的效用值,相比固定窗口 SSL 教育者 token 消耗减少 61.7%,总获取 token 消耗减少 16.9%。
查看 arXiv 页面 (https://arxiv.org/abs/2610.17860) 查看 PDF (https://arxiv.org/pdf/2610.17860) GitHub2 (https://github.com/NJU-LINK/Socratic-Skill-Learning) 添加到收藏集 (https://huggingface.co/login?next=%2Fpapers%2F2610.17860)
在你的智能体中获取这篇论文:
hf papers read 2610.17860
还没有最新版 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash
引用本论文的模型:0
没有模型链接本论文
在模型 README.md 中引用 arxiv.org/abs/2610.17860 以从本页面链接它。
引用本论文的数据集:1
NJU-LINK/SkillTransferBench RL 环境 • 更新于 6 天前 • 707 • 274 • 3 (https://huggingface.co/datasets/NJU-LINK/SkillTransferBench)
引用本论文的 Spaces:0
没有 Space 链接本论文
在 Space README.md 中引用 arxiv.org/abs/2610.17860 以从本页面链接它。
包含本论文的收藏集:0
没有收藏集包含本论文
将本论文添加到收藏集 (https://huggingface.co/new-collection) 以从本页面链接它。
相似文章
ContinualSkillBench:LLM智能体能否真正进化其能力?
介绍了ContinualSkillBench,一个用于LLM智能体上下文内持续技能学习的动态评估框架,表明虽然顺序执行能提升性能,但当前方法难以将经验巩固为稳健、可迁移的技能。
SkillLearnBench:面向真实任务代理技能生成的持续学习方法基准
SkillLearnBench 推出首个评估 LLM 代理持续技能学习的基准,覆盖 20 项真实任务,结果显示尚无方法全面领先,单纯扩大模型规模也无法保证技能提升。
SkillMaster:迈向大语言模型智能体的自主技能掌握
本文介绍了 SkillMaster,一种训练框架,使大语言模型智能体能够通过轨迹知情审查和反事实效用评估,自主地创建、优化和选择技能。
SKILL-KD:面向LLM智能体的对比技能蒸馏
SKILL-KD是一种对比技能蒸馏框架,通过将教师轨迹与学生轨迹之间的可操作差异蒸馏为文本技能补丁,并利用漂移感知合并机制迭代优化技能,从而提升LLM智能体的性能。
SkillCorpus: 整合与评估面向真实世界LLM智能体的开放技能生态
SkillCorpus 提出了一个框架,用于整合、精选和评估面向LLM智能体的开放技能生态,通过检索增强的技能集成,在多个基准测试中展示了一致的性能提升。