预印本表明,具备进化技能的小模型能超越无此技能的大模型。那么,什么应该持久化?

Reddit r/AI_Agents 论文

摘要

WikiSkill通过持久化维基来进化和转移技能,显示拥有此类技能的小模型在基准测试中优于无此技能的大模型,引发了关于AI代理中哪些知识应持久化的疑问。

WikiSkill将代理的原始运行、累积知识和可执行技能分离开来,然后使用持久化维基来指导后续的技能更新。作者报告称,进化技能可以跨模型族转移,并且在某些测试环境中,具备技能的小模型性能显著优于无技能的大模型。这是一份局限于基准测试的预印本,并非生产环境的证明。有趣的观点是,持久资产可能是结构化的、可修订的经验,而非一堆转录文本——并且这种资产有时能在模型交换后仍然存在。在生产代理中,哪些内容应被允许自动持久化:事实、程序、失败模式、评估结果,还是直到人工批准差异之前什么都保存?
查看原文

相似文章