Muse Wonder 1.0 基准测试
摘要
Meta 的 Muse Wonder 1.0 被描述为“寓言级模型”,其基准测试结果列于一张共享对比图表中。
https://preview.redd.it/i4huokx9g2vh1.png?width=3240&format=png&auto=webp&s=fd059e334b23ee2e9a2486f914872553ce1121da Meta 的 Fable 级模型
相似文章
Meta发布其首款前沿模型Muse Wonder
Meta的超级智能实验室发布了其首批前沿模型Muse Wonder和Muse Wonder Full,宣称其基准测试表现可媲美Fable 5.1和GPT-6 Astra,并特别强调了长期'主动记忆'能力以及在MemoryBench上的优异成绩。
BridgeMind 评 Muse Wonder:我这辈子从没见过这么刷榜的模型
对 Meta 的 Muse Wonder 模型的批评,认为其严重'刷榜'——针对关键基准测试进行过度调优,但在 BridgeBench 熔岩灯任务等真实测试中表现糟糕,与前沿模型的能力相差甚远。
Muse wonder 在 Artificial Analysis 仪表板上超越了 fable 5.1
据报道,Muse 在 Artificial Analysis 排行榜上超越了 Fable 5.1,表明基准测试仪表板上的模型排名发生了显著变化。
Muse Wonder(high)在扩展版 NYT Connections 基准测试中得分 93.4,领先 Muse Spark 1.3(high)的 85.1。它是受测模型中成本最高的之一。
Muse Wonder(high)在扩展版 NYT Connections 基准测试中取得 93.4 的成绩,超过 Muse Spark 1.3(high)的 85.1,但其成本在受测模型中位居最高之列。
缪斯奇迹
Meta 今日发布 Muse Wonder 系列前沿模型(Muse Wonder 与 Muse Wonder Full),主打个人与专业智能体任务,具备主动记忆与主动聚焦能力,已在编程、法律、金融等领域基准测试中达到领先水平,将通过 Meta 模型 API 和 Muse Code 提供服务。