GroundAnything:以闪电般的速度兼顾并行解码与精准视觉定位

Hugging Face Daily Papers 论文

摘要

GroundAnything 提出一个拥有 40 亿参数的视觉定位基础模型,通过块状去噪协调并行解码与精确定位,在 30 个视觉定位基准上取得同类模型的最新最佳性能(72.42%),并借助自投机解码实现 4.51 倍加速。

自回归(AR)视觉定位模型将空间预测序列化,引入顺序处理延迟,并对输出词元施加因果顺序。我们将视觉定位视为视觉证据提取:物体、位置和空间关系共同受到图像与查询的约束,但它们之间的依赖关系并不意味着存在内在的从左到右的生成顺序。这一区别使双向扩散成为一种自然的选择,使空间假设能够并行形成,并通过迭代去噪进行联合细化。我们提出 GroundAnything,这是一个拥有 40 亿参数的视觉定位基础模型,通过分块去噪兼顾快速并行解码与精确定位。训练流程结合了基于公开数据集和专用数据引擎的视觉定位预训练、采用联合 AR 与扩散目标的 AR 到扩散直接转换、监督微调,以及基于 GRPO 的强化学习后训练。在 30 个视觉定位基准上,我们的自回归变体 GroundAnything-VLM 以 72.42% 的成绩,在同等规模模型中创下新的总体最佳水平,并与 GPT-6 Astra(71.35%)保持竞争力。采用熵引导解码后,GroundAnything 也超越了此前该规模下的最佳水平,平均得分为 61.75%,而基于 MTP 的快速模型 LocateAnything 为 53.32%。我们进一步探索了解码策略,表明可选的自推测模式相较于 AR 版本实现了 4.51 倍加速,同时 COCO F1mIoU 仅下降 0.74 个百分点。基础设施实验表明,逐步实施的推理优化能够将并行解码转化为实际加速。这些成果支持在对延迟敏感的现实系统中实现高效视觉定位。
查看原文
查看缓存全文

缓存时间: 2026/10/13 06:44

论文页面 - GroundAnything:以闪电般的速度兼顾并行解码与精确视觉定位

来源:https://huggingface.co/papers/2609.39600 作者:

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

摘要

自回归(AR)定位模型将空间预测串行化,引入顺序执行延迟,并对输出词元施加因果顺序.我们将视觉定位视为视觉证据提取:物体、位置和空间关系共同受到图像与查询的约束,但它们之间的依赖关系并不意味着生成过程内在地需要从左到右进行.这一区别使双向扩散成为一种自然适配的方案,允许空间假设并行产生,并通过迭代去噪共同细化.我们提出GroundAnything,这是一个拥有40亿参数的视觉定位基础模型,通过分块去噪兼顾快速并行解码与精确定位.训练结合了基于公共数据集与专用数据引擎的视觉定位预训练、采用联合AR与扩散目标的直接AR到扩散转换、监督微调,以及基于GRPO的强化学习后训练.在30个视觉定位基准上,我们的自回归变体GroundAnything-VLM以72.42%的成绩,在规模相近的模型中创下新的总体最佳水平,并保持了与GPT-6Astra(71.35%)相抗衡的表现.采用熵引导解码时,GroundAnything也超越了这一规模下此前的最佳水平,平均成绩达到61.75%,而基于MTP的快速模型LocateAnything为53.32%.我们进一步探索了解码策略,结果表明,可选的自推测模式相较于AR版本实现了4.51倍加速,而COCOF1mIoU仅下降0.74个百分点.基础设施实验表明,逐步进行的推理优化能够将并行解码转化为实际加速.这些成果支持在延迟敏感的现实系统中实现高效视觉定位.

查看arXiv页面 (https://arxiv.org/abs/2609.39600)查看PDF (https://arxiv.org/pdf/2609.39600)项目页面 (https://groundingpi.github.io/groundanything/)GitHub20 (https://github.com/groundingpi/GroundAnything)添加到合集 (https://huggingface.co/login?next=%2Fpapers%2F2609.39600)

在你的智能体中获取这篇论文:

hf papers read 2609\.39600

没有最新版CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用这篇论文的模型2

GroundingPI/GroundAnything 图像与文本转文本• 50亿参数• 9天前更新 • 150 • 8 (https://huggingface.co/GroundingPI/GroundAnything)

GroundingPI/GroundAnything-VLM 图像与文本转文本• 50亿参数• 9天前更新 • 163 • 5 (https://huggingface.co/GroundingPI/GroundAnything-VLM)

引用这篇论文的数据集0

没有关联这篇论文的数据集

在数据集的README.md中引用arxiv.org/abs/2609.39600,即可从此页面链接到该数据集.

引用这篇论文的Spaces2

包含这篇论文的合集0

没有包含这篇论文的合集

将这篇论文添加到一个合集 (https://huggingface.co/new-collection),即可从此页面链接到该合集.

相似文章

Jag:用于高效视觉定位的直接边界框预测

Hugging Face Daily Papers

介绍 Jag,一个 0.8B 视觉定位模型,通过单次前向传播直接预测边界框而非自回归生成坐标,在保持与 LocateAnything 相当精度的同时,速度提升 3.62 倍、峰值 GPU 显存降低 73.88%,并开源了模型权重、代码与在线演示。

GroundingPI:面向物理智能的视觉基元接地基础模型

Hugging Face Daily Papers

GroundingPI:一个4B参数的视觉定位基础模型,以量化坐标生成点与框,在34个定位基准上以73.68%平均成绩超越GPT-6 Astra等44个基线,并在机器人操作与自动驾驶下游任务中显著提升性能。