面向通用长时程智能体的递归环境扩展

Hugging Face Daily Papers 论文

摘要

提出 Recursive Environment Scaling (RES) 框架,在保持任务目标不变的前提下递归变换基准环境以提升难度,既改善长程智能体评估,也使 SFT 在九组模型-基准对比中全部优于原始轨迹微调。

我们研究环境扩展,将其作为一种在保持核心任务目标不变的同时提高智能体基准测试难度的方法。我们的框架“递归环境扩展”(Recursive Environment Scaling,RES)对现有基准测试环境进行变换,同时保留其目标和完成要求。提议器修改信息访问方式、资源关系和执行依赖;基于实际执行的检查验证由此生成的候选环境,被接受的修改则在后续轮次中继承。这一过程生成相互关联的环境,用于配对评估和训练轨迹收集。在来自三个基准测试的294个初始任务上开展的实验表明,所有六个评估模型的任务成功率均有所下降,其中在Claw-Eval-Live上下降了57.14--77.14个百分点。在轨迹数量相同且优化设置完全一致的条件下,使用RES轨迹进行微调,在全部九组模型--基准测试比较中均优于使用原始轨迹进行的监督微调(SFT),提升幅度为7.00--14.61个百分点。消融实验表明,递归继承和依赖组合是提高难度的重要因素。总体而言,这些结果支持将环境扩展用于智能体评估和训练。
查看原文
查看缓存全文

缓存时间: 2026/10/16 07:03

论文页面 - 面向通用长时程智能体的递归环境扩展

来源:https://huggingface.co/papers/2610.16397 作者:

,

,

,

,

,

,

,

,

,

,

,

摘要

递归环境扩展通过变换基准来提高难度,同时保持目标不变,从而改进智能体评估和监督微调的表现\。

我们研究将环境扩展 (https://huggingface.co/papers?q=environment%20scaling)作为一种提高智能体基准难度 (https://huggingface.co/papers?q=agent-benchmark%20difficulty)的方法,同时保持核心任务目标不变\。我们的框架——递归环境扩展 (https://huggingface.co/papers?q=Recursive%20Environment%20Scaling)(RES)——对现有基准环境进行变换,同时保留其目标和完成要求\。提议器修改信息访问 (https://huggingface.co/papers?q=information%20access)、资源关系 (https://huggingface.co/papers?q=resource%20relations)和执行依赖 (https://huggingface.co/papers?q=execution%20dependencies);基于执行的检查 (https://huggingface.co/papers?q=execution-grounded%20checks)验证生成的候选环境,而被接受的修改会在后续轮次中继承\。这一过程生成相关联的环境,用于配对评估 (https://huggingface.co/papers?q=paired%20evaluation)和训练轨迹收集 (https://huggingface.co/papers?q=training-trajectory%20collection)\。在来自三个基准的 294 个初始任务上进行的实验表明,所有六个评估模型的任务成功率均有所下降,其中在 Claw-Eval-Live 上下降了 57.14--77.14 个百分点\。在轨迹数量相同、优化设置一致的情况下,使用 RES 轨迹进行微调,在全部九组模型与基准的比较中均优于使用原始轨迹的监督微调(SFT),提升了 7.00--14.61 个百分点\。消融实验表明,递归继承 (https://huggingface.co/papers?q=recursive%20inheritance)和依赖组合 (https://huggingface.co/papers?q=dependency%20composition)是提高难度的重要因素\。这些结果共同支持将环境扩展 (https://huggingface.co/papers?q=environment%20scaling)用于智能体评估和训练\。

查看 arXiv 页面 (https://arxiv.org/abs/2610.16397)查看 PDF (https://arxiv.org/pdf/2610.16397)添加到合集 (https://huggingface.co/login?next=%2Fpapers%2F2610.16397)

在你的智能体中获取这篇论文:

hf papers read 2610\.16397

还没有最新版 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用这篇论文的模型0

没有模型关联这篇论文

在模型的 README.md 中引用 arxiv.org/abs/2610.16397,即可在本页面建立指向该模型的链接\。

引用这篇论文的数据集0

没有数据集关联这篇论文

在数据集的 README.md 中引用 arxiv.org/abs/2610.16397,即可在本页面建立指向该数据集的链接\。

引用这篇论文的 Spaces0

没有 Space 关联这篇论文

在 Space 的 README.md 中引用 arxiv.org/abs/2610.16397,即可在本页面建立指向该 Space 的链接\。

收录这篇论文的合集0

没有合集收录这篇论文

将这篇论文添加到合集 (https://huggingface.co/new-collection),即可在本页面建立指向该合集的链接\。

相似文章

通过递归自我重写扩展复杂任务的训练轨迹

Hugging Face Daily Papers

论文提出了 Recursive Self-Rewrite(RSR)框架,该框架利用单一基础模型(Qwen-3.8-27B)在多种 harness 下发现成功解,并通过 planner-critic-executor 循环将其在通用 harness 下重构为训练轨迹,在监督微调后,terminal-bench 任务上的 pass@3 得到了显著提升。

SERA:自我评估的递归智能体

Hugging Face Daily Papers

SERA(Self-Evaluating Recursive Agents)提出了一个联合训练单一策略的框架,使其能够完成子任务分解、执行与评估。该框架通过可验证结果对齐评估准则,并引入叶覆盖奖励,在实验中显著优于递归智能体基线,表明学会评估能够提升求解能力。

AutoEnvScaling:利用终端智能体实现数据飞轮自动化

Hugging Face Daily Papers

AutoEnvScaling 将强化学习环境设计视为一项终端任务,让提案智能体根据求解智能体的执行轨迹自动构建训练环境,从而实现数据飞轮的自动化。该方法将有效环境的比例提升至最高 25 倍,同时降低 75% 的成本,使 Qwen 终端智能体的得分最多提高 12.2 分,并让单个模型同时作为求解器和生成器协同演化,向递归式自我改进迈出一步。

终端代理的环境演化

Hugging Face Daily Papers

本文提出环境演化方法,以离线方式逐步增加终端代理的任务难度,从而增强持续学习信号,并提升在Terminal-Bench 2.1等基准测试上的性能。

CoworkEnv:为长时程协同智能体合成训练环境

Hugging Face Daily Papers

CoworkEnv 提出一个能力引导框架,为 AI 协同智能体合成可执行的训练环境,通过工作流引导的任务构建与程序化验证,支持 SFT 与 RL 训练紧凑的 PocketWorker 模型,在 Claw-Eval 多轮任务上取得显著提升。