Fable 5 的 ProgramBench 结果已出，性能是 Opus 4.8 的两倍，即使 99% 的运行回退到 4.8

Reddit r/singularity 新闻
benchmark ai-models comparison results fable-5 opus-4-8 programbench

摘要

ProgramBench 结果显示，Fable 5 的性能是 Opus 4.8 的两倍，即使在 99% 的运行中回退到 4.8。

https://x.com/ValsAI/status/2066760552156971291 相当有趣的结果。ProgramBench 的创建者似乎在暗示，Fable 5 快速回退到 4.8 与 4.8 本身之间是有区别的，即使在那些消耗最多 4.8 token 的任务上也是如此。为什么在 Fable 5 的快速交接中，4.8 使用的 token 数量是 4.8 的两倍？
查看原文

相似文章

Fable 5 基准测试（使用 remotion 视频）

Reddit r/singularity

Fable 5 在视频生成基准测试中相比 Opus 4.8 整体有所改进，但 Gemini 3.1 Pro 展现了更多艺术视野，尽管在工具调用和编写有 bug 的代码方面存在问题。