SoftwareGym:通过多样化的合成软件环境扩展计算机使用智能体训练
摘要
SoftwareGym提出了一个自动化流水线,用于合成多样化的GUI软件环境以训练计算机使用代理(CUAs),合成182个应用并构建了SoftwareGym-Bench评测套件,在OSWorld基准上将Pass@3从41.39%提升至56.97%。
查看缓存全文
缓存时间: 2026/10/12 06:53
论文页面 - SoftwareGym:通过多样化合成软件环境扩展计算机使用智能体训练
来源:https://huggingface.co/papers/2610.12611
摘要
计算机使用智能体(CUAs)正在快速进步,但大规模合成多样且可靠的软件环境仍然具有挑战性。原生应用环境需要大量构建和集成工作,这限制了应用覆盖范围,并增加了针对特定应用过拟合的风险。浏览器托管环境提供的交互深度和工作流复杂性有限。这些局限促使我们提出SoftwareGym,这是一个自动化流水线,用于合成具有多样化界面、可执行功能和经过运行时验证的行为的GUI软件环境。它生成结构多样的设计,将其实现为可运行的应用程序,并通过GUI评估和迭代修复确保功能可靠性。使用SoftwareGym,我们合成了涵盖十二个类别的182个应用程序,GUI任务平均通过率达到91.5%。我们构建了SoftwareGym-Bench,这是一个涵盖相同十二个类别、包含120项任务的评估套件,并使用从这些环境中收集的轨迹训练CUA。训练得到的模型在严格域外的OSWorld基准上,将Pass@3从41.39%提升至56.97%,并在SoftwareGym-Bench上达到40.0%。这些结果表明,合成软件环境有潜力为CUA训练提供可扩展且可迁移的监督信号。
查看arXiv页面 (https://arxiv.org/abs/2610.12611)查看PDF (https://arxiv.org/pdf/2610.12611)GitHub3 (https://github.com/MrKiing-Jin/SoftwareGym)添加到合集 (https://huggingface.co/login?next=%2Fpapers%2F2610.12611)
在你的智能体中获取这篇论文:
hf papers read 2610\.12611
没有最新版CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash
引用这篇论文的模型0
没有模型关联这篇论文
在模型的README.md中引用arxiv.org/abs/2610.12611,即可从此页面关联该模型。
引用这篇论文的数据集0
没有数据集关联这篇论文
在数据集的README.md中引用arxiv.org/abs/2610.12611,即可从此页面关联该数据集。
引用这篇论文的Spaces0
没有Space关联这篇论文
在Space的README.md中引用arxiv.org/abs/2610.12611,即可从此页面关联该Space。
包含这篇论文的合集0
没有合集包含这篇论文
将这篇论文添加到一个合集 (https://huggingface.co/new-collection),即可从此页面关联该合集。
相似文章
CUA-Gym: 为计算机使用代理扩展可验证的训练环境与任务
CUA-Gym 引入了一个可扩展的流水线,用于为计算机使用代理生成可验证的训练环境和任务,从而解决数据稀缺问题。由此产生的数据集和模型在OSWorld-Verified和WebArena等基准测试上取得了强劲的性能。
Cowork-Gym:大规模合成交互式工作环境
Cowork-Gym 通过“构建—执行—修订”循环与有状态用户模拟器,大规模合成协作式智能体环境(6.49 万个,涵盖 14 个应用场景),并用于对 9B/27B/35B-A3B Qwen 模型进行后训练,在六个智能体基准测试上的得分分别提升 8.7、6.4、4.1 分,其中 27B 版本在 PawBench 和 ClawEval 上取得最高平均分。
面向科学领域的终端环境自监督扩展
提出软件在环重构(software-in-the-loop reconstruction)的自监督框架,从现有科学软件工作流中自动生成可执行的参考行为与验证目标,用于训练终端智能体;使用 Qwen3.8-Max 生成训练数据并对 Qwen3.8-27B 微调,使 Terminal-Bench 2 平均性能从 47.94% 提升至 53.56%。
ProgramGym:为长周期程序复现智能体构建可扩展的训练环境
ProgramGym 提出了一套由 Program-Env 和 Program-Agent 组成的框架,用于为长周期程序复现智能体构建可扩展、可验证的训练环境。在生成的环境中对 Qwen3.8-27B 进行微调后,性能取得了显著提升。
MobileGym: 一个可验证且高度并行的移动GUI代理研究仿真平台
MobileGym是一个基于浏览器的移动GUI代理研究仿真平台,具有确定性状态评估和可扩展的并行执行功能。它包含一个包含416个任务的基准测试,并展示了在Qwen3-VL-4B上使用GRPO带来的提升。