@rohanpaul_ai:一个仅1B参数的视觉模型在深度估计上击败了7B模型,且是冻结状态、单线性层、零微调。@robbyant_brain…
摘要
Robbyant发布了LingBot-Vision,一个基于边界训练的1B参数视觉模型,在深度估计上优于DINOv3-7B,且权重开放。
查看缓存全文
缓存时间: 2026/07/09 07:59
一个仅1B参数的视觉模型,在深度估计、冻结状态、单线性层、零微调的条件下,竟然击败了7B模型。
@robbyant_brain 的 LingBot-Vision:在NYU-Depth v2数据集上RMSE为0.296,而DINOv3-7B为0.309。模型大小仅为1/7。开放权重。
秘诀:在边界上训练,而非仅仅依赖语义。
Robbyant 发布了 LingBot-Vision,这是全球首个空间原生视觉基础模型,标志着视觉预训练范式的一次转变。
大多数视觉基础模型都经过训练,能够对视觉变化保持稳定,因此它们在识别“猫”、“椅子”或“桌子”时表现非常出色,即使光照或角度发生变化。
这对于识别任务很有用,但机器人需要更棘手、更物理的东西:物体的起点和终点在哪里,细线缆在哪里,透明杯子在哪里打破了深度感知,以及当机器人移动时,哪些边界应该保持稳定。
LingBot-Vision 是围绕边界训练的。 它自行学习承载边界的视觉标记,无需人工标注,无需外部边缘检测器,也无需从其他预训练骨干网络开始。
这些边界标记随后成为密集视觉特征的训练目标,因此模型能够在图像块级别学习场景结构,而不仅仅是学习高层语义。
结果是一个冻结的视觉骨干网络,在深度估计、分割和视频对象跟踪方面表现出色,包括在NYUv2深度估计上达到0.296 RMSE,优于拥有7B参数的DINOv3(0.309),同时参数数量少得多。
相似文章
@rohanpaul_ai: 机器人的“眼睛”刚刚迎来了一次重大升级。LingBot-Depth 2.0,一个深度补全模型,误差减半…
LingBot-Depth 2.0 是一个深度补全模型,将深度误差减半,在玻璃、镜子等透明物体上表现出色,并在16个基准测试中取得了12项第一,其背后是开源的LingBot-Vision骨干网络。
LingBot-Vision: 基于掩码边界建模的自监督预训练 (在1.1B参数下NYUv2线性探测RMSE为0.296,对比DINOv3-7B的0.309,在ImageNet上稍逊一筹);提供四种尺寸的权重[R]
LingBot-Vision引入了掩码边界建模用于自监督预训练,在1.1B参数下NYUv2线性探测上达到0.296 RMSE,而DINOv3-7B为0.309,虽然在ImageNet上表现稍逊;已发布四种尺寸的权重。
@AdinaYakup: LingBot Vision 来自蚂蚁集团的一种用于密集空间感知的自监督视觉骨干网络家族 @robbyant_brain - A…
LingBot Vision 是蚂蚁集团推出的一种自监督视觉骨干网络家族,它采用掩码边界建模方法,在密集空间感知任务上取得了领先性能,在 NYU-Depth v2 基准上超越了更大的 DINOv3 模型。
蚂蚁集团发布LingBot-Vision:DINO系列视觉骨干网络,提供四种规模,其中0.3B参数的ViT-L在NYUv2深度估计任务上以约23倍更少的参数量达到与DINOv3-7B相当的性能
蚂蚁集团发布了LingBot-Vision,这是一个包含四种规模的DINO风格视觉骨干网络系列;其中0.3B ViT-L在NYUv2深度估计任务上,以约23倍更少的参数量达到了DINOv3-7B的性能,展现了显著的效率提升。
Meta 在其自有许可协议下将 DINOv3 置于访问门槛之后。蚂蚁集团的 Robbyant 刚刚以 Apache-2.0 协议发布了完整的视觉骨干网络家族。当感知变得自由且轻量时,会发生什么?
蚂蚁集团旗下的具身智能公司 Robbyant 发布了 LingBot-Vision,这是一系列自监督视觉骨干网络,参数量从 21M 到 1.1B,采用 Apache-2.0 协议。尽管使用的训练数据不到 DINOv3 的三分之一,它在多个深度和分割基准测试中与 DINOv3 持平或超越,凸显了开放感知模型的推动力。