NorthCUA 技术报告:通过规模化经验为计算机使用智能体注入强大动力

Hugging Face Daily Papers 论文

摘要

NorthCUA 技术报告提出了一套集成系统,通过经验飞轮、递归自我改进、分阶段学习和强化学习来扩展计算机使用智能体,其 Nano、Mini 和 Pro 模型系列在 GUI 定位、桌面执行和 Web 交互方面取得了开源模型中的最先进结果。

将计算机使用智能体从单个动作扩展到复杂的软件工作,需要能够将决策与完整结果关联起来的经验。我们提出 NorthCUA——一套通过规模化经验为计算机使用智能体注入强大动力的集成系统。其经验飞轮(Experience Flywheel)为 NorthCUA Harness 提供多样化的可执行任务;该 Harness 维持长时间交互、记录决策并校验任务结果。飞轮利用这些记录整理出经过验证的轨迹。对于尚未解决的任务,递归自我改进会演化出可复用的技能,并保留已验证的里程碑,使后续尝试能够在先前进展的基础上继续推进。分阶段学习(Staged Learning)将这些经验与飞轮提供的定位数据相结合,通过中期训练和长时程监督微调来培养 GUI 操作能力。随后,策略在同一 Harness 中通过桌面-Web 联合强化学习从新的尝试中学习,从而在经验生成与策略改进之间形成闭环。由此产生的 Nano、Mini 和 Pro 模型系列,在所报告的评估设置下,在 GUI 定位、桌面执行和 Web 交互方面均取得了开源模型中的最先进结果。为获得响应更迅速的 Web 工作流,NorthCUA-Ultrafast 将直接动作选择与开放式生成相结合,应用于 RL 之前的 Nano 模型,提供了经过实测的质量-延迟折中。这些进展共同确立了 NorthCUA 作为高性能模型系列的地位,并为能够将复杂软件工作从意图推进到完成的智能体提供了可复用的基础。
查看原文
查看缓存全文

缓存时间: 2026/11/03 07:35

论文页面 - NorthCUA 技术报告:通过大规模经验为计算机使用智能体提速

来源:https://huggingface.co/papers/2611.02102 作者:

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

摘要

NorthCUA 通过经验飞轮、递归自我改进、分阶段学习和强化学习来扩展计算机使用智能体,实现了最先进的开源 GUI 和网页交互结果.

将计算机使用智能体(https://huggingface.co/papers?q=computer-use%20agents)从执行单个操作扩展到完成复杂的软件工作,需要将决策与完整结果联系起来的经验. 我们提出 NorthCUA,这是一个通过大规模经验加速计算机使用智能体(https://huggingface.co/papers?q=computer-use%20agents)的集成系统. 它的经验飞轮(https://huggingface.co/papers?q=Experience%20Flywheel)为 NorthCUA Harness 提供多样化的可执行任务,Harness 负责维持长时间交互、记录决策并检查任务结果. 飞轮利用这些记录来筛选经过验证的轨迹. 对于未解决的任务,递归自我改进(https://huggingface.co/papers?q=recursive%20self-improvement)会演化出可复用技能(https://huggingface.co/papers?q=reusable%20skills)并保留经过验证的里程碑(https://huggingface.co/papers?q=verified%20milestones),使后续尝试能够在先前进展的基础上继续. 分阶段学习(https://huggingface.co/papers?q=Staged%20Learning)将这些经验与飞轮提供的接地数据相结合,通过中期训练和长时程监督微调(https://huggingface.co/papers?q=supervised%20fine-tuning)来培养 GUI 能力. 随后,策略通过在同一个 Harness 中进行的桌面-网页联合强化学习(https://huggingface.co/papers?q=reinforcement%20learning),从全新的尝试中学习,从而闭合经验生产与策略改进之间的回路. 最终得到的 Nano、Mini 和 Pro 系列在所报告的评测设置下,在 GUI 接地(https://huggingface.co/papers?q=GUI%20grounding)、桌面执行(https://huggingface.co/papers?q=desktop%20execution)和 Web 交互(https://huggingface.co/papers?q=Web%20interaction)方面取得了开源模型中最先进的结果. 为了获得更敏捷的 Web 工作流,NorthCUA-Ultrafast 在预 RL 的 Nano 上将直接动作选择与开放式生成相结合,提供了可量化的质量-延迟权衡. 这些进展共同确立了 NorthCUA 作为高性能模型系列的地位,并为将复杂软件工作从意图带到完成的智能体提供了可复用的基础.

查看 arXiv 页面 (https://arxiv.org/abs/2611.02102) 查看 PDF (https://arxiv.org/pdf/2611.02102) 项目页面 (https://beipo.top/blog/northcua/) GitHub14 (https://github.com/beipo-ai/NorthCUA) 添加到收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2611.02102)

在你的智能体中获取这篇论文:

hf papers read 2611\.02102

还没有最新版 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用此论文的模型 0

没有模型链接此论文

在模型 README.md 中引用 arxiv.org/abs/2611.02102 即可从此页面链接它.

引用此论文的数据集 0

没有数据集链接此论文

在数据集 README.md 中引用 arxiv.org/abs/2611.02102 即可从此页面链接它.

引用此论文的 Space 0

没有 Space 链接此论文

在 Space README.md 中引用 arxiv.org/abs/2611.02102 即可从此页面链接它.

包含此论文的合集 0

没有合集包含此论文

将此论文添加到合集即可从此页面链接它\

相似文章

ToolCUA:迈向计算机使用代理的 GUI-工具路径编排优化

Hugging Face Daily Papers

ToolCUA 是一个全新的代理框架,通过分阶段训练和强化学习,优化计算机使用代理的 GUI-工具路径选择。它通过在 GUI 操作和高级工具调用之间进行有效交替,在 OSWorld-MCP 上达到了最先进的性能。

PRO-CUA:面向计算机使用代理的过程奖励优化

arXiv cs.AI

本文介绍了PRO-CUA,一种使用迭代步骤级强化学习训练计算机使用代理(CUA)的过程奖励优化框架。该方法将同策略环境交互与策略优化解耦,实现了密集的信用分配,无需依赖专家轨迹,并在实时网络基准测试中展示了有效性。

计算机使用代理

OpenAI Blog

# 计算机使用代理 来源: [https://openai.com/index/computer-using-agent/](https://openai.com/index/computer-using-agent/) 通过计算机使用代理(Computer-Using Agent)为Operator提供支持,这是AI与数字世界交互的通用接口。今天我们推出了[Operator⁠\(在新窗口中打开\)](https://operator.chatgpt.com/)的研究预览版,这是一个能够在网络上为你执行任务的代理。Operator由计算机使用代理(CUA)驱动,这是一个结合了GPT-4o视觉功能的模型