我们取得了多大进展?比较LLMs:Sonnet 4 vs. GPT-5.5
摘要
本文通过为Flappy Bird游戏生成代码,比较Claude Sonnet 4和GPT-5.5,展示了LLM能力在1.5年内的显著进步。
Claude Sonnet 4 和 GPT-5.5 中等努力用于两者。免费计划用于输出。在短短1.5年内,模型取得了惊人的进步。提示描述:创建一个简单的横向卷轴游戏,名为"Flappy Bird"。主角是一只自动向前移动的小卡通鸟。玩家通过点击或点击屏幕使鸟拍打翅膀并保持在空中,避免碰到随机间距的管道。游戏功能:多彩的2D背景(天空、云朵,可能还有城市景观)。Flappy Bird角色在点击时向上拍打并因重力下落。成排的管道有间隙,向左移动穿过屏幕。每次鸟通过间隙时,分数增加1。如果鸟碰到管道或地面,游戏结束,显示最终分数和"重新玩"按钮。有趣的拍打、通过管道和碰撞的音效。艺术风格:卡通和欢快。鸟看起来可爱友好。管道和背景明亮、简单、易于理解。控制:点击或点击=拍打(鸟短暂向上移动)。无其他控制。可选扩展:显示最高分数。鸟的翅膀和管道进出简单动画。游戏开始前显示"准备"消息。现实案例:想想实际的Flappy Bird手机游戏——它非常流行,玩起来快,难以掌握,还有点上瘾。你点击手机让鸟保持在空中并躲避绿色管道。可操作提示:专注于平滑、响应灵敏的点击控制。保持图形轻量且不杂乱。让第一局稍微容易一些,以免玩家感到沮丧。
相似文章
@rohanpaul_ai: atomic[.]chat,一款本地运行LLM的桌面应用,对Claude Sonnet 5、Claude Opus 4……进行了一次极具揭示性的对比。
atomic.chat进行了一项对比,显示Claude Sonnet 5在三个物理编码演示中与GPT 5.5表现相当,但成本低6倍,且使用的token数少于其他模型。
@reach_vb: GPT-5.6 Luna Max在DeepSWE v1.1测试中比Sonnet 5 Max高出13.3分,而Sonnet的成本是其44倍。DeepSWE测试co…
GPT-5.6 Luna Max在DeepSWE v1.1编码基准测试中以更低的成本优于Sonnet 5 Max,并且与Gemini 3.7 Flash Medium相比也表现出强劲性能。
GPT-5.5 性能领先(且出现幻觉),Kimi K2.6 领跑开源大语言模型,AI 给气候承诺带来压力,大语言模型与人类的战略思维比较
GPT-5.5 在基准测试中达到新水平但存在幻觉问题;Kimi K2.6 领先开源大语言模型;同时探讨 AI 对气候承诺的影响以及大语言模型的战略思维。
GPT-5.6 在 eq-bench 的 Creative Writing 基准测试中排名第一
GPT-5.6 在 Eq-Bench 的 Creative Writing 基准测试中取得第一名,展示了 AI 生成创意文本方面的重大进展。
GPT-6 Sol 与 Sonnet 5.5 在相同任务成本下的对比:Sol 更高效,Sonnet 5.5 具有更高的性能上限
根据 Artificial Analysis 的数据,在相似预算下,GPT-6 Sol 比 Sonnet 5.5 更具成本效益,但 Sonnet 5.5 在成本增加时能实现更高的性能。