AI竞赛:中国的开源权重模型仅落后美国闭源模型7个月

Reddit r/LocalLLaMA 工具

摘要

作者推出了 whatmodel.sh,一个开源 AI 排行榜,汇总了 987 个基准测试中的 22,113 项公开基准测试结果,显示中国的开源权重模型目前仅落后美国闭源模型 7 个月。该数据集和评分代码均以开源许可协议发布。

来源:whatmodel.sh,一个我构建的开源 AI 排行榜(昨天在此处发布)。每一个数据点都来自公开的基准测试结果:横跨 987 个基准测试的 22,113 项结果,来自 1,011 个来源,每一项都附有其发布位置的链接。此图表使用的是文本模型的数据:1,211 个模型在 617 个基准测试上的 18,755 项结果。 - 其中 14,436 项结果为独立评估:论文作者自行运行模型得出的结果(大部分是来自 ACL Anthology 和 arXiv 的 CC BY 许可论文)、Epoch AI、LMArena 数据集、EvalPlus、EleutherAI 测试框架等。 - 7,677 项为各实验室自行报告的自家模型分数,标注为实验室自报。 一切皆为开源:数据集(CC BY-SA 4.0)和评分代码(MIT)均托管在 https://github.com/jakemanger/whatmodel,CSV 下载地址为 https://whatmodel.sh/data/manifest.json。每个数字都可追溯至其来源,且每个来源的许可协议均有记录。交互版本(点击任意模型即可查看其分数和来源):https://whatmodel.sh/race 如果你觉得有用,欢迎在 GitHub 上点星支持!
查看原文

相似文章

中国的开放AI模型正在挑战硅谷的惯用策略

Wired

中国AI实验室发布具有竞争力的开源模型(GLM 5.2、Kimi K3、Qwen 3.8),挑战西方闭源主导地位,引发美国政治反弹,并凸显了中国与硅谷在开放与封闭AI路径上的分歧。