AI模型与工具组合：哪一个最好？

Reddit r/AI_Agents 新闻
ai-benchmark model-comparison harness-evaluation speed-test capability-assessment

摘要

本文介绍了一个基准测试，用于比较各种AI模型与工具组合在数学、视觉和编程等任务中的能力和速度，并列出了两个类别中的最佳表现者。

比较实际应用中的工具与模型组合很困难，因此我为此创建了一个基准测试。它测试基础数学、视觉、计算机使用（如阅读邮件、导航商店）和编程。它比较各种模型和工具，看它们的好坏，更重要的是，看它们的速度。能力排名前十 Claude Code/Opus 5.5 - 100% (14m 26s) openclaw/openrouter/qwen3.8-max-0902 - 98% (26m 33s) opencode/openrouter/deepseek-v4.1-flash - 96% (10m 56s) hermes/rtx5090/qwen3.8-27b-nvfp4 - 96% (1h 50m) Codex Sol 5.6 Medium - 96% (21m 54s) hermes/openrouter/qwen3.8-max-0902 - 96% (1h 23m) pi/openrouter/deepseek-v4.1-flash - 94% (13m 36s) opencode/rtx5090/qwen3.8-27b-nvfp4 - 94% (1h 41m) opencode/openrouter/glm-5.3-flash - 92% (22m 54s) pi/openrouter/glm-5.3-flash - 92% (34m 04s) 速度排名前十 openclaw/openrouter/kimi-k2.6 - 1m 33s (18%) hermes/rtx5090/gemma-4-26b-a4b-nvfp4 - 2m 24s (47%) opencode/rtx5090/gemma-4-26b-a4b-nvfp4 - 3m 21s (14%) opencode/openrouter/deepseek-v4.1-flash - 10m 56s (96%) opencode/openrouter/kimi-k2.6 - 12m 28s (53%) codex - 12m 36s (73%) Codex gpt-5 - 13m 02s (92%) openclaw/openrouter/deepseek-v4.1-flash - 13m 23s (88%) pi/openrouter/deepseek-v4.1-flash - 13m 36s (94%) Claude Code - 14m 26s (100%) 为了更好地浏览结果，我会在评论中附加一个链接。
查看原文

相似文章

用哪个模型、哪种框架？我这里有数据可以分享。

Reddit r/LocalLLaMA

一个独立基准测试网站（airbench.ai）在编码、视觉、数学和计算机使用任务上测试了 AI Agent 框架与模型的组合配置，发现本地量化模型如 swift-1.5-qwen3.8-27b-q6_k 和 qwen3.8-flash-next-strata 在一张 RTX 5090 上如今已能达到 Claude Opus 5.5 的质量水平，并且框架的选择（opencode/omp 与 pi/hermes/openclaw）与模型本身一样重要。

我们需要一个工具基准排行榜

Reddit r/AI_Agents

本文主张需要一个基准排行榜，用于比较AI模型工具（例如KimiCode、OpenCode和Codex），而不仅仅是模型本身，并提出了一个代码库，用于测试模型+工具组合的成本、运行时间、token使用量和得分。

评估框架确实重要

Reddit r/LocalLLaMA

作者强调评估框架对DeepSeek V4.1 Flash AI模型的性能有显著影响，表明在AI测试中框架选择的关键作用。