@rohanpaul_ai:自我改进的智能体只有在测试框架的修改版在全新的独立任务上优于当前版本后,才应接受该修改。……

X AI KOLs Timeline 论文

摘要

该推文介绍了一项关于自我改进智能体的研究,将运行框架的自我修改方法映射为进化算法,并提出准入规则:只有在全新的独立任务上以一定幅度超越当前版本时,才接受修改,以防止过拟合与技能遗忘。

自我改进的智能体只有在全新、独立的任务上优于当前版本后,才应接受对运行框架的修改。 它将运行框架的自我改进方法映射到进化算法,从简单的择优保留搜索,到档案库、帕累托选择,以及由多臂老虎机算法指导的预算分配。 自我改进的智能体现已开始重写自身的运行框架:围绕固定模型的提示词、记忆、工具和代码。获准的修改会沿用至后续运行,因此,不良修改可能导致过拟合、抹去原有技能,或传播到其他用户。 他们按修改对象对这些修改进行分类,范围从提示词到运行时代码。其准入规则是:只有当修改后的运行框架在新的、独立的任务上以预设幅度优于当前框架时,才保留该修改。 在他们根据既有研究汇编的一个案例中,配备经进化优化的运行框架和技能的 GPT-5.4-nano 在 SpreadsheetBench 上得分为 77.58%。仅进行技能调优的 GPT-5.5 得分为 76.20%,但两者的成本并未对齐。 如果你的智能体会修改自身配置,请在全新任务上测试每项变更,并确保它无法触及评估器、权限和紧急停止机制。
查看原文
查看缓存全文

缓存时间: 2026/10/16 02:18

自我改进的智能体只有在全新、独立的任务上胜过当前版本后,才应接受对运行框架的修改。

它将运行框架的自我改进方法对应到演化算法,从简单的保留最优方案搜索,到档案库、帕累托选择和多臂老虎机引导的预算分配。

自我改进的智能体如今会重写自己的运行框架:围绕固定模型的提示词、记忆、工具和代码。被接受的修改会沿用到后续运行中,因此,一次糟糕的修改可能导致过拟合、抹去已有技能,或传播给其他用户。

他们根据修改的对象对这些改动进行分类,涵盖从提示词到运行时代码的各个层面。他们的准入规则是:只有当修改后的框架在全新、独立的任务上以预设幅度胜过当前框架时,才保留该修改。

在他们根据以往研究整理的一个案例中,配备经过演化的运行框架和技能的 GPT-5.4-nano 在 SpreadsheetBench 上取得了 77.58% 的成绩。仅进行技能调优的 GPT-5.5 得分为 76.20%,但两者的成本并未保持一致。

如果你的智能体会修改自身配置,请在全新任务上测试每一项改动,并确保它无法触及评估器、权限和紧急停止机制。

相似文章

基于多任务的自进化 harness:agent 作为自身的优化器

arXiv cs.AI

提出一种自进化 agent harness 框架:同一个冻结模型先作为 solver 求解任务,再作为 proposer 直接编辑自身 harness 的代码;在多任务上完成进化后,于分布外基准上显著超越 Codex(提升 12.64 分)并达到相当的表现水平。

自我进化代理脚手架框架

Hugging Face Daily Papers

提出一个自我进化代理框架(Harness RSI),在保持模型权重固定的情况下,通过反馈驱动的修订与进化优化,持续改进代理的软件脚手架(提示、记忆、工作流和可执行组件),并借助持续 PAC 学习为泛化与保留能力提供理论保证。