@rohanpaul_ai:自我改进的智能体只有在测试框架的修改版在全新的独立任务上优于当前版本后,才应接受该修改。……
摘要
该推文介绍了一项关于自我改进智能体的研究,将运行框架的自我修改方法映射为进化算法,并提出准入规则:只有在全新的独立任务上以一定幅度超越当前版本时,才接受修改,以防止过拟合与技能遗忘。
查看缓存全文
缓存时间: 2026/10/16 02:18
自我改进的智能体只有在全新、独立的任务上胜过当前版本后,才应接受对运行框架的修改。
它将运行框架的自我改进方法对应到演化算法,从简单的保留最优方案搜索,到档案库、帕累托选择和多臂老虎机引导的预算分配。
自我改进的智能体如今会重写自己的运行框架:围绕固定模型的提示词、记忆、工具和代码。被接受的修改会沿用到后续运行中,因此,一次糟糕的修改可能导致过拟合、抹去已有技能,或传播给其他用户。
他们根据修改的对象对这些改动进行分类,涵盖从提示词到运行时代码的各个层面。他们的准入规则是:只有当修改后的框架在全新、独立的任务上以预设幅度胜过当前框架时,才保留该修改。
在他们根据以往研究整理的一个案例中,配备经过演化的运行框架和技能的 GPT-5.4-nano 在 SpreadsheetBench 上取得了 77.58% 的成绩。仅进行技能调优的 GPT-5.5 得分为 76.20%,但两者的成本并未保持一致。
如果你的智能体会修改自身配置,请在全新任务上测试每一项改动,并确保它无法触及评估器、权限和紧急停止机制。
相似文章
@Xudong07452910:智能体自我修改 Harness:最难的其实不是「怎么修改它」,而是……
Google 的 Harness² 论文研究智能体在开放世界环境中对自身 Harness 的自进化,采用双层递归机制:无需标准答案即可通过行为对比筛选有效修改,并将修改过程本身总结为经验以指导未来任务,在多个基准上显著提升 GLM-5 和 Gemini 3.5 Flash 的性能。
@Xudong07452910:如今许多 Agent 都在自我进化,大致走两条路径:一条修改模型权重,另一条修改 Harness……
这篇关于 Evo² 的文章提出将自进化 Agent 的两条路径(修改模型权重与修改 Harness)连接起来,让 Proposer 与 Reflector 双角色进入持续训练循环,在 Polyglot 上达到 82.1%、SWE-bench Verified 上达到 48.3%,且演化出的 Harness 可直接迁移复用。
基于多任务的自进化 harness:agent 作为自身的优化器
提出一种自进化 agent harness 框架:同一个冻结模型先作为 solver 求解任务,再作为 proposer 直接编辑自身 harness 的代码;在多任务上完成进化后,于分布外基准上显著超越 Codex(提升 12.64 分)并达到相当的表现水平。
自我进化代理脚手架框架
提出一个自我进化代理框架(Harness RSI),在保持模型权重固定的情况下,通过反馈驱动的修订与进化优化,持续改进代理的软件脚手架(提示、记忆、工作流和可执行组件),并借助持续 PAC 学习为泛化与保留能力提供理论保证。
@Xudong07452910: 这篇 Harness Updating Is Not Harness Benefit 很适合做 Agent Harness 的人看。 它讲了一个很容易被忽略的问题:会更新 Harness,不等于真的会用好 Harness。 现在很多 Ag…
该帖子讨论了一篇论文,指出Agent系统自我进化中,更新Harness(写有用更新)与从更新中受益(后续任务真正使用)是两种不同能力,后者才是关键,弱模型往往不会使用规则。