SoftwareGym:通过多样化的合成软件环境扩展计算机使用智能体训练

Hugging Face Daily Papers 论文

摘要

SoftwareGym提出了一个自动化流水线,用于合成多样化的GUI软件环境以训练计算机使用代理(CUAs),合成182个应用并构建了SoftwareGym-Bench评测套件,在OSWorld基准上将Pass@3从41.39%提升至56.97%。

计算机使用智能体(CUA)正在迅速进步,但大规模合成多样且可靠的软件环境仍然面临挑战。原生应用环境需要投入大量构建和集成工作,这限制了应用覆盖范围,并增加了针对特定应用过拟合的风险。浏览器托管环境所能提供的交互深度和工作流复杂度有限。这些局限促使我们提出 SoftwareGym,这是一个自动化流水线,用于合成具有多样界面、可执行功能和经过运行时验证的行为的 GUI 软件环境。它生成结构多样的设计,将其实现为可运行的应用,并通过 GUI 评估与迭代修复来确保功能可靠性。利用 SoftwareGym,我们合成了涵盖十二个类别的 182 个应用,GUI 任务的平均通过率达到 91.5%。我们构建了 SoftwareGym-Bench,这是一个包含 120 项任务、涵盖相同十二个类别的评估套件,并使用从这些环境中收集的轨迹来训练 CUA。训练得到的模型在严格域外的 OSWorld 基准上将 Pass@3 从 41.39% 提升至 56.97%,并在 SoftwareGym-Bench 上达到 40.0%。这些结果表明,合成软件环境有潜力为 CUA 训练提供可扩展且可迁移的监督信号。
查看原文
查看缓存全文

缓存时间: 2026/10/12 06:53

论文页面 - SoftwareGym:通过多样化合成软件环境扩展计算机使用智能体训练

来源:https://huggingface.co/papers/2610.12611

摘要

计算机使用智能体(CUAs)正在快速进步,但大规模合成多样且可靠的软件环境仍然具有挑战性。原生应用环境需要大量构建和集成工作,这限制了应用覆盖范围,并增加了针对特定应用过拟合的风险。浏览器托管环境提供的交互深度和工作流复杂性有限。这些局限促使我们提出SoftwareGym,这是一个自动化流水线,用于合成具有多样化界面、可执行功能和经过运行时验证的行为的GUI软件环境。它生成结构多样的设计,将其实现为可运行的应用程序,并通过GUI评估和迭代修复确保功能可靠性。使用SoftwareGym,我们合成了涵盖十二个类别的182个应用程序,GUI任务平均通过率达到91.5%。我们构建了SoftwareGym-Bench,这是一个涵盖相同十二个类别、包含120项任务的评估套件,并使用从这些环境中收集的轨迹训练CUA。训练得到的模型在严格域外的OSWorld基准上,将Pass@3从41.39%提升至56.97%,并在SoftwareGym-Bench上达到40.0%。这些结果表明,合成软件环境有潜力为CUA训练提供可扩展且可迁移的监督信号。

查看arXiv页面 (https://arxiv.org/abs/2610.12611)查看PDF (https://arxiv.org/pdf/2610.12611)GitHub3 (https://github.com/MrKiing-Jin/SoftwareGym)添加到合集 (https://huggingface.co/login?next=%2Fpapers%2F2610.12611)

在你的智能体中获取这篇论文:

hf papers read 2610\.12611

没有最新版CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用这篇论文的模型0

没有模型关联这篇论文

在模型的README.md中引用arxiv.org/abs/2610.12611,即可从此页面关联该模型。

引用这篇论文的数据集0

没有数据集关联这篇论文

在数据集的README.md中引用arxiv.org/abs/2610.12611,即可从此页面关联该数据集。

引用这篇论文的Spaces0

没有Space关联这篇论文

在Space的README.md中引用arxiv.org/abs/2610.12611,即可从此页面关联该Space。

包含这篇论文的合集0

没有合集包含这篇论文

将这篇论文添加到一个合集 (https://huggingface.co/new-collection),即可从此页面关联该合集。

相似文章

CUA-Gym: 为计算机使用代理扩展可验证的训练环境与任务

Hugging Face Daily Papers

CUA-Gym 引入了一个可扩展的流水线,用于为计算机使用代理生成可验证的训练环境和任务,从而解决数据稀缺问题。由此产生的数据集和模型在OSWorld-Verified和WebArena等基准测试上取得了强劲的性能。

Cowork-Gym:大规模合成交互式工作环境

Hugging Face Daily Papers

Cowork-Gym 通过“构建—执行—修订”循环与有状态用户模拟器,大规模合成协作式智能体环境(6.49 万个,涵盖 14 个应用场景),并用于对 9B/27B/35B-A3B Qwen 模型进行后训练,在六个智能体基准测试上的得分分别提升 8.7、6.4、4.1 分,其中 27B 版本在 PawBench 和 ClawEval 上取得最高平均分。

面向科学领域的终端环境自监督扩展

Hugging Face Daily Papers

提出软件在环重构(software-in-the-loop reconstruction)的自监督框架,从现有科学软件工作流中自动生成可执行的参考行为与验证目标,用于训练终端智能体;使用 Qwen3.8-Max 生成训练数据并对 Qwen3.8-27B 微调,使 Terminal-Bench 2 平均性能从 47.94% 提升至 53.56%。