Show HN: Pelican-bicycle 替代方案(更新至2026年)
摘要
本文比较了2025年和2026年各种AI模型根据特定提示生成SVG的性能,详细说明了输出质量、耗时和成本。
在2025年11月和12月,受Simon Willison的pelican-riding-a-bicycle基准测试启发,我让一些当时的LLM从三十个类似的提示中创建SVG,例如“生成一个章鱼操作管风琴的SVG。” Simon在他的博客[1]中提到了这个实验。<p>九个月过去了,更强大的模型已经发布,所以我今天再次尝试了这个实验。链接的网站显示了结果。<p>通过OpenRouter运行十个提示在六个模型上大约花费了二十美元,所以我暂时到此为止。<p>[1] <a href="https://simonwillison.net/2025/Nov/25/" rel="nofollow">https://simonwillison.net/2025/Nov/25/</a>
查看缓存全文
缓存时间: 2026/09/14 14:47
# Pelican-bicycle 替代方案
来源:https://gally.net/temp/20260914pelican-alternatives/index.html
## 1\. 一只章鱼演奏管风琴
“生成一张章鱼演奏管风琴的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只章鱼演奏管风琴
GPT\-6 Astra
OpenAI
2分19秒,$0\.37
Claude Fable 5.1:一只章鱼演奏管风琴
Claude Fable 5\.1
Anthropic
3分22秒,$0\.79
Gemini 3.8 Flash:一只章鱼演奏管风琴
Gemini 3\.8 Flash
Google
4分40秒,$0\.12
DeepSeek V4 Pro:一只章鱼演奏管风琴
DeepSeek V4 Pro
DeepSeek
1分36秒,$0\.10
Qwen3.8 Max:一只章鱼演奏管风琴
Qwen3\.8 Max
Alibaba
12分37秒,$0\.20
Fugu Ultra v2:一只章鱼演奏管风琴
Fugu Ultra v2
Sakana AI
4分21秒,$0\.65
**2025年测试**10个模型
Claude Sonnet 4.5:一只章鱼演奏管风琴
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只章鱼演奏管风琴
Claude Opus 4\.5
Anthropic
GPT-5.1:一只章鱼演奏管风琴
GPT\-5\.1
OpenAI
GPT-5.2 Pro:一只章鱼演奏管风琴
GPT\-5\.2 Pro
OpenAI
Gemini 2.5 Pro:一只章鱼演奏管风琴
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只章鱼演奏管风琴
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只章鱼演奏管风琴
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只章鱼演奏管风琴
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只章鱼演奏管风琴
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只章鱼演奏管风琴
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 2\. 一只长颈鹿组装落地钟
“生成一张长颈鹿组装落地钟的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只长颈鹿组装落地钟
GPT\-6 Astra
OpenAI
2分26秒,$0\.36
Claude Fable 5.1:一只长颈鹿组装落地钟
Claude Fable 5\.1
Anthropic
1分58秒,$0\.46
Gemini 3.8 Flash:一只长颈鹿组装落地钟
Gemini 3\.8 Flash
Google
2分16秒,$0\.07
DeepSeek V4 Pro:一只长颈鹿组装落地钟
DeepSeek V4 Pro
DeepSeek
4分44秒,$0\.05
Qwen3.8 Max:一只长颈鹿组装落地钟
Qwen3\.8 Max
Alibaba
11分47秒,$0\.19
Fugu Ultra v2:一只长颈鹿组装落地钟
Fugu Ultra v2
Sakana AI
6分0秒,$1\.02
**2025年测试**10个模型
Claude Sonnet 4.5:一只长颈鹿组装落地钟
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只长颈鹿组装落地钟
Claude Opus 4\.5
Anthropic
GPT-5.1:一只长颈鹿组装落地钟
GPT\-5\.1
OpenAI
GPT-5.2 Pro:一只长颈鹿组装落地钟
GPT\-5\.2 Pro
OpenAI
Gemini 2.5 Pro:一只长颈鹿组装落地钟
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只长颈鹿组装落地钟
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只长颈鹿组装落地钟
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只长颈鹿组装落地钟
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只长颈鹿组装落地钟
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只长颈鹿组装落地钟
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 3\. 一只海星驾驶推土机
“生成一张海星驾驶推土机的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只海星驾驶推土机
GPT\-6 Astra
OpenAI
82秒,$0\.20
Claude Fable 5.1:一只海星驾驶推土机
Claude Fable 5\.1
Anthropic
66秒,$0\.30
Gemini 3.8 Flash:一只海星驾驶推土机
Gemini 3\.8 Flash
Google
2分31秒,$0\.09
DeepSeek V4 Pro:一只海星驾驶推土机
DeepSeek V4 Pro
DeepSeek
3分48秒,$0\.06
Qwen3.8 Max:一只海星驾驶推土机
Qwen3\.8 Max
Alibaba
9分45秒,$0\.15
Fugu Ultra v2:一只海星驾驶推土机
Fugu Ultra v2
Sakana AI
5分30秒,$0\.96
**2025年测试**10个模型
Claude Sonnet 4.5:一只海星驾驶推土机
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只海星驾驶推土机
Claude Opus 4\.5
Anthropic
GPT-5.1:一只海星驾驶推土机
GPT\-5\.1
OpenAI
GPT-5.2 Pro:一只海星驾驶推土机
GPT\-5\.2 Pro
OpenAI
Gemini 2.5 Pro:一只海星驾驶推土机
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只海星驾驶推土机
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只海星驾驶推土机
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只海星驾驶推土机
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只海星驾驶推土机
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只海星驾驶推土机
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 4\. 一只驼鹿操控旋转木马
“生成一张驼鹿操控旋转木马的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只驼鹿操控旋转木马
GPT\-6 Astra
OpenAI
2分22秒,$0\.32
Claude Fable 5.1:一只驼鹿操控旋转木马
Claude Fable 5\.1
Anthropic
2分44秒,$0\.65
Gemini 3.8 Flash:一只驼鹿操控旋转木马
Gemini 3\.8 Flash
Google
2分9秒,$0\.08
DeepSeek V4 Pro:一只驼鹿操控旋转木马
DeepSeek V4 Pro
DeepSeek
5分59秒,$0\.08
Qwen3.8 Max:一只驼鹿操控旋转木马
Qwen3\.8 Max
Alibaba
14分56秒,$0\.25
Fugu Ultra v2:一只驼鹿操控旋转木马
Fugu Ultra v2
Sakana AI
13分13秒,$1\.86
**2025年测试**9个模型
Claude Sonnet 4.5:一只驼鹿操控旋转木马
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只驼鹿操控旋转木马
Claude Opus 4\.5
Anthropic
GPT-5.1:一只驼鹿操控旋转木马
GPT\-5\.1
OpenAI
Gemini 2.5 Pro:一只驼鹿操控旋转木马
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只驼鹿操控旋转木马
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只驼鹿操控旋转木马
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只驼鹿操控旋转木马
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只驼鹿操控旋转木马
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只驼鹿操控旋转木马
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 5\. 一只火烈鸟修理望远镜
“生成一张火烈鸟修理望远镜的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只火烈鸟修理望远镜
GPT\-6 Astra
OpenAI
2分2秒,$0\.28
Claude Fable 5.1:一只火烈鸟修理望远镜
Claude Fable 5\.1
Anthropic
2分7秒,$0\.48
Gemini 3.8 Flash:一只火烈鸟修理望远镜
Gemini 3\.8 Flash
Google
3分36秒,$0\.11
DeepSeek V4 Pro:一只火烈鸟修理望远镜
DeepSeek V4 Pro
DeepSeek
3分24秒,$0\.04
Qwen3.8 Max:一只火烈鸟修理望远镜
Qwen3\.8 Max
Alibaba
10分26秒,$0\.18
Fugu Ultra v2:一只火烈鸟修理望远镜
Fugu Ultra v2
Sakana AI
14分4秒,$2\.05
**2025年测试**9个模型
Claude Sonnet 4.5:一只火烈鸟修理望远镜
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只火烈鸟修理望远镜
Claude Opus 4\.5
Anthropic
GPT-5.1:一只火烈鸟修理望远镜
GPT\-5\.1
OpenAI
Gemini 2.5 Pro:一只火烈鸟修理望远镜
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只火烈鸟修理望远镜
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只火烈鸟修理望远镜
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只火烈鸟修理望远镜
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只火烈鸟修理望远镜
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只火烈鸟修理望远镜
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 6\. 一只刺猬演奏手风琴
“生成一张刺猬演奏手风琴的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只刺猬演奏手风琴
GPT\-6 Astra
OpenAI
86秒,$0\.19
Claude Fable 5.1:一只刺猬演奏手风琴
Claude Fable 5\.1
Anthropic
79秒,$0\.35
Gemini 3.8 Flash:一只刺猬演奏手风琴
Gemini 3\.8 Flash
Google
1分52秒,$0\.07
DeepSeek V4 Pro
DeepSeek
4分5秒,$0\.05
Qwen3.8 Max:一只刺猬演奏手风琴
Qwen3\.8 Max
Alibaba
8分44秒,$0\.15
Fugu Ultra v2:一只刺猬演奏手风琴
Fugu Ultra v2
Sakana AI
2分30秒,$0\.35
**2025年测试**9个模型
Claude Sonnet 4.5:一只刺猬演奏手风琴
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只刺猬演奏手风琴
Claude Opus 4\.5
Anthropic
GPT-5.1:一只刺猬演奏手风琴
GPT\-5\.1
OpenAI
Gemini 2.5 Pro:一只刺猬演奏手风琴
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只刺猬演奏手风琴
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只刺猬演奏手风琴
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只刺猬演奏手风琴
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只刺猬演奏手风琴
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只刺猬演奏手风琴
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 7\. 一只水母驾驶摩天轮
“生成一张水母驾驶摩天轮的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只水母驾驶摩天轮
GPT\-6 Astra
OpenAI
2分6秒,$0\.32
Claude Fable 5.1:一只水母驾驶摩天轮
Claude Fable 5\.1
Anthropic
74秒,$0\.33
Gemini 3.8 Flash:一只水母驾驶摩天轮
Gemini 3\.8 Flash
Google
2分32秒,$0\.09
DeepSeek V4 Pro:一只水母驾驶摩天轮
DeepSeek V4 Pro
DeepSeek
4分5秒,$0\.08
Qwen3.8 Max:一只水母驾驶摩天轮
Qwen3\.8 Max
Alibaba
9分3秒,$0\.15
Fugu Ultra v2:一只水母驾驶摩天轮
Fugu Ultra v2
Sakana AI
3分36秒,$0\.69
**2025年测试**9个模型
Claude Sonnet 4.5:一只水母驾驶摩天轮
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只水母驾驶摩天轮
Claude Opus 4\.5
Anthropic
GPT-5.1:一只水母驾驶摩天轮
GPT\-5\.1
OpenAI
Gemini 2.5 Pro:一只水母驾驶摩天轮
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只水母驾驶摩天轮
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只水母驾驶摩天轮
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只水母驾驶摩天轮
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只水母驾驶摩天轮
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只水母驾驶摩天轮
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 8\. 一只大象在打字机上打字
“生成一张大象在打字机上打字的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只大象在打字机上打字
GPT\-6 Astra
OpenAI
1分42秒,$0\.21
Claude Fable 5.1:一只大象在打字机上打字
Claude Fable 5\.1
Anthropic
66秒,$0\.26
Gemini 3.8 Flash:一只大象在打字机上打字
Gemini 3\.8 Flash
Google
2分14秒,$0\.08
DeepSeek V4 Pro:一只大象在打字机上打字
DeepSeek V4 Pro
DeepSeek
3分5秒,$0\.05
Qwen3.8 Max:一只大象在打字机上打字
Qwen3\.8 Max
Alibaba
2分40秒,$0\.05
Fugu Ultra v2:一只大象在打字机上打字
Fugu Ultra v2
Sakana AI
3分14秒,$0\.41
**2025年测试**9个模型
Claude Sonnet 4.5:一只大象在打字机上打字
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只大象在打字机上打字
Claude Opus 4\.5
Anthropic
GPT-5.1:一只大象在打字机上打字
GPT\-5\.1
OpenAI
Gemini 2.5 Pro:一只大象在打字机上打字
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只大象在打字机上打字
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只大象在打字机上打字
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只大象在打字机上打字
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只大象在打字机上打字
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只大象在打字机上打字
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 9\. 一只变色龙调试三角钢琴
“生成一张变色龙调试三角钢琴的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只变色龙调试三角钢琴
GPT\-6 Astra
OpenAI
2分40秒,$0\.37
Claude Fable 5.1:一只变色龙调试三角钢琴
Claude Fable 5\.1
Anthropic
2分56秒,$0\.63
Gemini 3.8 Flash:一只变色龙调试三角钢琴
Gemini 3\.8 Flash
Google
3分13秒,$0\.11
DeepSeek V4 Pro:一只变色龙调试三角钢琴
DeepSeek V4 Pro
DeepSeek
6分48秒,$0\.08
Qwen3.8 Max:一只变色龙调试三角钢琴
Qwen3\.8 Max
Alibaba
17分24秒,$0\.27
Fugu Ultra v2:一只变色龙调试三角钢琴
Fugu Ultra v2
Sakana AI
8分22秒,$1\.05
**2025年测试**9个模型
Claude Sonnet 4.5:一只变色龙调试三角钢琴
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只变色龙调试三角钢琴
Claude Opus 4\.5
Anthropic
GPT-5.1:一只变色龙调试三角钢琴
GPT\-5\.1
OpenAI
Gemini 2.5 Pro:一只变色龙调试三角钢琴
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只变色龙调试三角钢琴
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只变色龙调试三角钢琴
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只变色龙调试三角钢琴
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只变色龙调试三角钢琴
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只变色龙调试三角钢琴
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 10\. 一只企鹅抛接电锯
“生成一张企鹅抛接电锯的SVG图像”
**2026年测试**6个模型
GPT-6 Astra:一只企鹅抛接电锯
GPT\-6 Astra
OpenAI
1分37秒,$0\.22
Claude Fable 5.1:一只企鹅抛接电锯
Claude Fable 5\.1
Anthropic
46秒,$0\.20
Gemini 3.8 Flash:一只企鹅抛接电锯
Gemini 3\.8 Flash
Google
1分36秒,$0\.06
DeepSeek V4 Pro:一只企鹅抛接电锯
DeepSeek V4 Pro
DeepSeek
3分2秒,$0\.05
Qwen3.8 Max:一只企鹅抛接电锯
Qwen3\.8 Max
Alibaba
9分53秒,$0\.17
Fugu Ultra v2:一只企鹅抛接电锯
Fugu Ultra v2
Sakana AI
5分38秒,$0\.89
**2025年测试**9个模型
Claude Sonnet 4.5:一只企鹅抛接电锯
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只企鹅抛接电锯
Claude Opus 4\.5
Anthropic
GPT-5.1:一只企鹅抛接电锯
GPT\-5\.1
OpenAI
Gemini 2.5 Pro:一只企鹅抛接电锯
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只企鹅抛接电锯
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只企鹅抛接电锯
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只企鹅抛接电锯
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只企鹅抛接电锯
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只企鹅抛接电锯
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 11\. 一只树懒操控挖掘机
“生成一张树懒操控挖掘机的SVG图像”
**2026年测试**尚未为此提示词生成
**2025年测试**9个模型
Claude Sonnet 4.5:一只树懒操控挖掘机
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只树懒操控挖掘机
Claude Opus 4\.5
Anthropic
GPT-5.1:一只树懒操控挖掘机
GPT\-5\.1
OpenAI
Gemini 2.5 Pro:一只树懒操控挖掘机
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只树懒操控挖掘机
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只树懒操控挖掘机
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只树懒操控挖掘机
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只树懒操控挖掘机
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只树懒操控挖掘机
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
## 12\. 一只蜻蜓平衡枝形吊灯
“生成一张蜻蜓平衡枝形吊灯的SVG图像”
**2026年测试**尚未为此提示词生成
**2025年测试**9个模型
Claude Sonnet 4.5:一只蜻蜓平衡枝形吊灯
Claude Sonnet 4\.5
Anthropic
Claude Opus 4.5:一只蜻蜓平衡枝形吊灯
Claude Opus 4\.5
Anthropic
GPT-5.1:一只蜻蜓平衡枝形吊灯
GPT\-5\.1
OpenAI
Gemini 2.5 Pro:一只蜻蜓平衡枝形吊灯
Gemini 2\.5 Pro
Google
Gemini 3.0 Pro Preview:一只蜻蜓平衡枝形吊灯
Gemini 3\.0 Pro Preview
Google
Grok Code Fast 1:一只蜻蜓平衡枝形吊灯
Grok Code Fast 1
xAI
DeepSeek V3.2-Exp:一只蜻蜓平衡枝形吊灯
DeepSeek V3\.2\-Exp
DeepSeek
GLM-4.6:一只蜻蜓平衡枝形吊灯
GLM\-4\.6
Z\.ai \(Zhipu\)
Qwen3-VL-235B-A22B-Thinking:一只蜻蜓平衡枝形吊灯
Qwen3\-VL\-235B\-A22B\-Thinking
Alibaba
相似文章
Are AI Labs Pelicanmaxxing?
一项分析调查了AI实验室是否在针对流行的‘骑自行车的鹈鹕’SVG基准测试优化其模型,该测试在48个提示中测试了七个前沿模型,使用不同的动物和车辆,未发现过拟合的强有力证据。
@karpathy: More on the pelican on the bicycle test from @simonw: https://simonwillison.net/2025/Jun/6/six-months-in-llms/… I uploa…
Simon Willison's keynote at AI Engineer World's Fair reviews the last six months in LLMs, highlighting over 30 significant model releases and his 'pelican on a bicycle' SVG benchmark as a practical evaluation tool.
@Pluvio9yte:当AI画一只骑自行车的鹈鹕时,谁大跌眼镜?同样的请求,实际测试:Fusion画出了链条、曲柄组、a…
Fusion是来自新加坡实验室的新AI模型,在SVG生成方面表现出色,具有准确的结构连接和与Claude的Opus 5相比显著的成本节省。
@reach_vb: 嘿 @simonw - 既然 pelican on a bike svg 已经饱和(?),你现在评估模型或 harness 的首选方法是什么…
一条来自 @reach_vb 的推文,向 @simonw 询问评估 AI 模型或 harness 的方法,提到了已饱和的 'pelican on a bike svg' 基准。
Gemini 4 Pro 对比 Gemini 3.8 Flash(骑自行车的鹈鹕 SVG)
这是 Gemini 4 Pro 和 Gemini 3.8 Flash AI 模型之间的对比基准测试,测试内容为生成一个骑自行车的鹈鹕的 SVG 图像。