NorthCUA 技术报告:通过规模化经验为计算机使用智能体注入强大动力
摘要
NorthCUA 技术报告提出了一套集成系统,通过经验飞轮、递归自我改进、分阶段学习和强化学习来扩展计算机使用智能体,其 Nano、Mini 和 Pro 模型系列在 GUI 定位、桌面执行和 Web 交互方面取得了开源模型中的最先进结果。
查看缓存全文
缓存时间: 2026/11/03 07:35
论文页面 - NorthCUA 技术报告:通过大规模经验为计算机使用智能体提速
来源:https://huggingface.co/papers/2611.02102 作者:
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
摘要
NorthCUA 通过经验飞轮、递归自我改进、分阶段学习和强化学习来扩展计算机使用智能体,实现了最先进的开源 GUI 和网页交互结果.
将计算机使用智能体(https://huggingface.co/papers?q=computer-use%20agents)从执行单个操作扩展到完成复杂的软件工作,需要将决策与完整结果联系起来的经验. 我们提出 NorthCUA,这是一个通过大规模经验加速计算机使用智能体(https://huggingface.co/papers?q=computer-use%20agents)的集成系统. 它的经验飞轮(https://huggingface.co/papers?q=Experience%20Flywheel)为 NorthCUA Harness 提供多样化的可执行任务,Harness 负责维持长时间交互、记录决策并检查任务结果. 飞轮利用这些记录来筛选经过验证的轨迹. 对于未解决的任务,递归自我改进(https://huggingface.co/papers?q=recursive%20self-improvement)会演化出可复用技能(https://huggingface.co/papers?q=reusable%20skills)并保留经过验证的里程碑(https://huggingface.co/papers?q=verified%20milestones),使后续尝试能够在先前进展的基础上继续. 分阶段学习(https://huggingface.co/papers?q=Staged%20Learning)将这些经验与飞轮提供的接地数据相结合,通过中期训练和长时程监督微调(https://huggingface.co/papers?q=supervised%20fine-tuning)来培养 GUI 能力. 随后,策略通过在同一个 Harness 中进行的桌面-网页联合强化学习(https://huggingface.co/papers?q=reinforcement%20learning),从全新的尝试中学习,从而闭合经验生产与策略改进之间的回路. 最终得到的 Nano、Mini 和 Pro 系列在所报告的评测设置下,在 GUI 接地(https://huggingface.co/papers?q=GUI%20grounding)、桌面执行(https://huggingface.co/papers?q=desktop%20execution)和 Web 交互(https://huggingface.co/papers?q=Web%20interaction)方面取得了开源模型中最先进的结果. 为了获得更敏捷的 Web 工作流,NorthCUA-Ultrafast 在预 RL 的 Nano 上将直接动作选择与开放式生成相结合,提供了可量化的质量-延迟权衡. 这些进展共同确立了 NorthCUA 作为高性能模型系列的地位,并为将复杂软件工作从意图带到完成的智能体提供了可复用的基础.
查看 arXiv 页面 (https://arxiv.org/abs/2611.02102) 查看 PDF (https://arxiv.org/pdf/2611.02102) 项目页面 (https://beipo.top/blog/northcua/) GitHub14 (https://github.com/beipo-ai/NorthCUA) 添加到收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2611.02102)
在你的智能体中获取这篇论文:
hf papers read 2611\.02102
还没有最新版 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash
引用此论文的模型 0
没有模型链接此论文
在模型 README.md 中引用 arxiv.org/abs/2611.02102 即可从此页面链接它.
引用此论文的数据集 0
没有数据集链接此论文
在数据集 README.md 中引用 arxiv.org/abs/2611.02102 即可从此页面链接它.
引用此论文的 Space 0
没有 Space 链接此论文
在 Space README.md 中引用 arxiv.org/abs/2611.02102 即可从此页面链接它.
包含此论文的合集 0
没有合集包含此论文
将此论文添加到合集即可从此页面链接它\
相似文章
HybridCUA:学习编排GUI和CLI以用于计算机使用代理
本文提出了HybridCUA,一种结合GUI和CLI交互的计算机使用代理方法,采用两阶段训练框架,包括监督微调和强化学习,以提高任务准确性和跨平台通用性。
ToolCUA:迈向计算机使用代理的 GUI-工具路径编排优化
ToolCUA 是一个全新的代理框架,通过分阶段训练和强化学习,优化计算机使用代理的 GUI-工具路径选择。它通过在 GUI 操作和高级工具调用之间进行有效交替,在 OSWorld-MCP 上达到了最先进的性能。
CUA-Master:通过开放世界递归改进扩展计算机操作智能体
CUA-Master 提出嵌套双环递归改进框架,通过开放世界语料、自催化任务合成与反馈引导的快照回滚重试机制持续提升计算机使用代理(CUA)性能,其 27B 模型在 OSWorld Verified 等基准上取得竞争力表现。
PRO-CUA:面向计算机使用代理的过程奖励优化
本文介绍了PRO-CUA,一种使用迭代步骤级强化学习训练计算机使用代理(CUA)的过程奖励优化框架。该方法将同策略环境交互与策略优化解耦,实现了密集的信用分配,无需依赖专家轨迹,并在实时网络基准测试中展示了有效性。
计算机使用代理
# 计算机使用代理 来源: [https://openai.com/index/computer-using-agent/](https://openai.com/index/computer-using-agent/) 通过计算机使用代理(Computer-Using Agent)为Operator提供支持,这是AI与数字世界交互的通用接口。今天我们推出了[Operator\(在新窗口中打开\)](https://operator.chatgpt.com/)的研究预览版,这是一个能够在网络上为你执行任务的代理。Operator由计算机使用代理(CUA)驱动,这是一个结合了GPT-4o视觉功能的模型