Claude Sonnet 5 已发布,与 Opus 4.8 的差距比我预想的要小

Reddit r/ArtificialInteligence 模型

摘要

Anthropic 发布了 Claude Sonnet 5,其基准测试得分非常接近 Opus 4.8,但价格大幅降低,使其成为代理任务的诱人选择,尽管可能存在实际差距。

Anthropic 刚刚发布了 Claude Sonnet 5。https://preview.redd.it/po9v9yxt4hah1.jpg?width=2600&format=pjpg&auto=webp&s=acc28da937d36724795190b133aff95424e6edb9 在基准测试表中,Sonnet 5 的得分非常接近 Opus 4.8。差距小到让我怀疑是否还应该继续将代理任务路由到 Opus。对于混乱的多步骤编码工作,完成率比峰值准确率更重要。早期测试者表示,Sonnet 5 终于能完成旧版 Sonnet 中途卡顿的任务。接下来是价格。截至 8 月 31 日,首发定价为每百万 token $2/$10,之后为 $3/$15。这远低于 Opus。如果我在实际工作流程中的差距只有几个百分点,那么节省的成本可能相当可观。需要牢记的一点是:基准测试不是你的代码库。排行榜上 5-6 个百分点的差距在实际工作中常常会缩小。但以这个价格,即使只有很小的实际差距,也让 Sonnet 5 变得有趣。
查看原文

相似文章

Claude Sonnet 5 的新特性

Simon Willison's Blog

Anthropic 发布了 Claude Sonnet 5,该模型性能接近 Opus 4.8,价格更低,但采用了新的分词器,使得英文和代码的 token 数量增加约 30%,从而实际上提高了成本。