GPT-5.6 Sol 在无工具条件下以 pass@5 达到 ZeroBench 人类基线

Reddit r/singularity 模型

摘要

据报道,GPT-5.6 Sol 在无工具条件下以 pass@5 达到 ZeroBench 人类基线,这意味着在基准测试中五次尝试中至少有一次成功。

pass@5:如果 5 次尝试中至少有一次正确则得分 pass^5:仅当所有 5 次尝试都正确时才得分 “pass@1”:并非真正的单次尝试 pass@1,而是 5 次尝试的平均得分。 https://zerobench.github.io/
查看原文

相似文章

GPT 5.6 Sol 基准测试

Reddit r/singularity

GPT 5.6 Sol 在 AI 语言建模方面取得新的基准测试结果,展示了性能改进。