Nemotron 3.5 Bolt 对比 Nemo 3.5 Super 对比 Qwen 3.8 27B/FN
摘要
Nemotron 3.5 Bolt、Nemotron 3.5 Super 和 Qwen 3.8(27B / FN)在 SWE-bench Pro、Terminal Bench、GPQA-Diamond 和 HLE 等任务上的基准测试并列对比,显示 Qwen 3.8 FN 在大多数指标上领先。
从模型卡中提取基准测试结果。由于部分模型未注明版本,基准测试结果可能无法完全直接比较。基准测试 3.5 Bolt 3.5 Super 3.8 27B 3.8 FN DeepSWE 不适用 24.65 42.2 58.7 GPQA-Diamond 86.43 89.52 89.2 91.7 SWE-bench Pro 不适用 51.78 61.7 62.5 Terminal Bench 2.1 50.98 66.70 73.0 不适用 HLE 25.30 29.20 30.8 35.9 LiveCodeBench v6 不适用 88.22 90.3 91.9 IFBench 不适用 70.86 79.5 81.3 AA 智能指数 21 26 34 40
相似文章
Qwen 3.6 35B A3B 的热度绝非虚名!
作者对小型本地 LLM 进行了基准测试,重点突出了 Qwen 3.6 35B A3B,其将学术代码与研究论文进行映射的能力优于 Gemma 4 和 Nemotron 3 Nano 等模型。
Qwen 3.6 35B A3B 与 Qwen 3.5 122B A10B 对比
用户反馈,尽管基准测试表现亮眼,Qwen 3.5 122B 在多步任务上大幅领先 Qwen 3.6 35B,怀疑是量化或部署配置问题。
使用真实世界任务评估 Nemotron 3.5 Bolt
作者用真实工作场景的 ETL 任务(shell 脚本重构与 Python 编排器开发)对比评估 Nemotron 3.5 Bolt 与 Qwen Flash Next,并由 Gemini 作为裁判判定胜负,结果各赢一局。
Qwen3.6-35B-A3B 和 9B 已正式登上公开的 Terminal-Bench 2.0 排行榜!
Qwen3.6-35B-A3B 和 Qwen3.5-9B 模型已正式登上 Terminal-Bench 2.0 排行榜,其中 little-coder 在 35B 变体上取得 24.6% 的成绩,超越了 Gemini 2.5 Pro 和 Qwen3-Coder-480B;而 9B 模型则表明,10B 以下的本地模型能够与高难度代理基准竞争。
Qwen-3.8-27B、Nemotron-3.5-Lightning-30B-A3B、Ornith-1.5-35B-A3B、Muse-Glimmer-30B oQ8e 对比
对比了多个AI模型,包括Qwen、Nemotron、Ornith和Muse-Glimmer在基准测试上的表现。Ornith表现优异,而TielCoder在编程任务中展现了潜力。