COBRA-Skills: 基于上下文赌博机的高效代理技能优化(开源)
摘要
本文介绍了 COBRA-Skills,这是一种利用上下文赌博机高效优化代理技能的方法,通过避免重复的基于 LLM 的轨迹分析和技能重写来降低成本。
我们一直在探索如何使代理技能优化更加高效。许多现有方法遵循生成-执行-分析-优化循环:候选技能在真实任务上执行,失败轨迹被分析,技能被反复重写。这种方法可能有效,但很快会变得昂贵。COBRA-Skills 将其视为一个顺序预算分配问题:下一个最值得评估的技能是什么?我们的循环大致是:维护一个候选技能种群;使用神经预测器估计技能效用;使用 LinearUCB 平衡利用和探索;仅在目标代理上评估选定的技能;重用执行反馈以进行计划的再生、变异和交叉。我们在涵盖搜索问答、电子表格、文档理解、数学推理、社会推理和具身任务的 6 个代理基准测试上进行了测试,涉及 3 个目标模型。主要结果:在比较方法中平均性能最佳;优化成本比 SkillOpt 低约 55-58%;每个基准仅需 50 个优化示例;在 Codex 和 Claude Code 框架下仍然有效;当目标模型本身用于技能生成和优化时也仍然有效。我们发现有趣的一点是,主要收益并非仅仅来自减少目标代理的执行。成本的大幅降低主要源于避免了重复的基于 LLM 的轨迹分析和技能重写。论文:https://arxiv.org/abs/2609.11682 代码:https://github.com/Jerry-LuP/COBRA-Skills HF:https://huggingface.co/papers/2609.11682 我们很感兴趣收到反馈,特别是来自从事代理技能、提示优化或上下文赌博机工作的人。
相似文章
COBRA-Skills:上下文赌博机引导的智能体技能优化进化
COBRA-Skills 提出了一种通过上下文赌博机和进化算子优化智能体技能的方法,在多个 AI 智能体基准测试中实现了 55-58% 的优化成本降低。
SkillOpt:自我进化智能体技能的执行策略
SkillOpt 引入了一种系统化的文本空间优化器,用于智能体技能。该优化器将技能训练为智能体的外部状态,具有稳定的更新和零部署推理开销,在多个基准测试和执行环境中实现了卓越性能。
MASkills:多智能体LLM系统的持续技能优化
MASkills 提出了一个持续学习框架,通过智能体技能优化多智能体LLM系统,使用基于技能的信用分配和层次聚合来提升在 HotpotQA 和 GAIA 等任务上的性能。
Bayesian-Agent:后验引导的LLM代理技能进化框架
Bayesian-Agent 提出了一种框架,将可重复使用的技能和SOP视为假设,通过贝叶斯推理指导代理行为,并利用后验引导的框架优化提升任务性能。使用deepseek-v4-flash在多个基准上取得了显著改进。
SkillMaster:迈向大语言模型智能体的自主技能掌握
本文介绍了 SkillMaster,一种训练框架,使大语言模型智能体能够通过轨迹知情审查和反事实效用评估,自主地创建、优化和选择技能。