GPT-5.5 在 ActiveVision 上得分 10.6%,人类达到 96.1% [R]
摘要
一篇新的 arXiv 论文引入了 ActiveVision 基准测试,旨在测试重复视觉感知能力,发现前沿视觉模型如 GPT-5.5 和 Claude Fable 5 分别仅得分 10.6% 和 3.5%,而人类达到了 96.1%。
一篇新 [arXiv 论文](https://arxiv.org/abs/2607.16165) 中的一个有趣发现并非前沿视觉模型在新基准测试中失败——这种事情每周都会发生——而是失败的具体形态,以及模型无法通过编写自己的代码来修补这一事实。该基准测试名为 ActiveVision,包含 3 个类别下的 17 个任务,用作者的话说,旨在“强制进行重复视觉感知,而非单一的静态描述”。GPT-5.5 在最高暴露推理努力层级下解决了 10.6% 的题目,并在 17 个任务中的 11 个上得分为零。作者指出在大多数推理和编程排行榜上名列前茅的 Claude Fable 5,仅获得了 3.5%。三名人类参与者的平均正确率为 96.1%。
相似文章
配备工具后的GPT-5.5在BabyVision基准上已超越10岁儿童水平
GPT-5.5在配备工具后,在BabyVision基准测试中的表现已超越10岁儿童,标志着AI视觉推理能力的显著进步。
Claude Fable 在 ZeroBench(高难度视觉基准测试)上已赶超 GPT
Claude Fable 在具有挑战性的 ZeroBench 视觉基准测试中与 GPT 性能持平,pass@5 和 pass^5 得分相当。
视觉的难与易:GPT-6 Astra 在计算机视觉领域的启示
本文评估了 GPT-6 Astra 在 34 项计算机视觉能力上的表现,揭示了其在语义解释和推理方面的强大性能,但在度量几何精度和专业细粒度知识方面仍存在持续差距。
GPT 5.6 Sol 是 OpenAI 迄今发布的最佳“视觉”模型
OpenAI 的 GPT-5.6 Sol 在基准测试中被评估为该公司迄今最强的视觉模型,与 GPT-5.5 等前代模型相比,在物体检测和其他视觉任务上表现出显著提升。
GPT-6 Astra在ZeroBench(一个极其困难的视觉基准测试)上取得了巨大飞跃,在所有三个指标上超越了人类基线。
GPT-6 Astra在ZeroBench这个极其困难的视觉基准测试上取得了巨大飞跃,在所有三个指标上超越了人类基线。