1. 图表数据
  2. artificial-analysis
  3. Share of tasks Agent solved on a given attempt (pass@1) vs p
artificial-analysis跑分柱状图 · 36 个数据点 · GPT-5

Share of tasks Agent solved on a given attempt (pass@1) vs pass@5 (at least once) vs pass^5, on all 5 attempts (pass^5) - Top 10 models by pass^5 - Higher is better

artificial-analysis 发布的一张图背后的数字,用原生图表重画。对照原图,研究数据,再做你自己的。

图表来自 artificial-analysis. 来源: x.com

简化重绘

由我们用下面的数字重新绘制。悬停、点按或用方向键查看。

这是简化重绘:它用我们自己的样式展示数字,不是原图的样子。强调色标出这张图的主角。表格里带 ~ 的是估算值。

数字

36 个点中前 10 个免费
分组系列数值来源置信
Claude Opus 5pass@1 (Given Attempt)64%估算0.97
Claude Opus 5pass@5 (At Least Once)74%估算0.97
Claude Opus 5pass^5 (All 5 Attempts)54%估算0.97
GPT-5.5 (kimi)pass@1 (Given Attempt)68%估算0.97
GPT-5.5 (kimi)pass@5 (At Least Once)79%估算0.97
GPT-5.5 (kimi)pass^5 (All 5 Attempts)50%估算0.97
Claude Taille 5pass@1 (Given Attempt)~60%估算0.50
Claude Taille 5pass@5 (At Least Once)~69%估算0.50
Claude Taille 5pass^5 (All 5 Attempts)~40%估算0.50
GPT-5.5 (mini)pass@1 (Given Attempt)61%估算0.97

Max 数据,目前留邮箱免费看

查看全部 36 个数据点并下载文件

这张图的完整表格、JSON、CSV 和 agent skill 文件。它们属于 Max;原型阶段,留邮箱即可解锁。

解锁全部 35 家巨头。每周一封,随时退订。 看看能得到什么 · 登录

GPT-5.5 (mini)pass@5 (At Least Once)70%估算0.97
GPT-5.5 (mini)pass^5 (All 5 Attempts)48%估算0.97
Claude Sonnet 5pass@1 (Given Attempt)62%估算0.97
Claude Sonnet 5pass@5 (At Least Once)~76%估算0.30
Claude Sonnet 5pass^5 (All 5 Attempts)46%估算0.97
Claude Opus 4.8pass@1 (Given Attempt)64%估算0.97
Claude Opus 4.8pass@5 (At Least Once)73%估算0.97
Claude Opus 4.8pass^5 (All 5 Attempts)45%估算0.97
Gemini 3.5 Flash (high)pass@1 (Given Attempt)59%估算0.97
Gemini 3.5 Flash (high)pass@5 (At Least Once)~76%估算0.30
Gemini 3.5 Flash (high)pass^5 (All 5 Attempts)45%估算0.97
Claude Opus 4.7pass@1 (Given Attempt)60%估算0.97
Claude Opus 4.7pass@5 (At Least Once)74%估算0.90
Claude Opus 4.7pass^5 (All 5 Attempts)44%估算0.97
Gemini 3.1 Pro Previewpass@1 (Given Attempt)64%估算0.97
Gemini 3.1 Pro Previewpass@5 (At Least Once)81%估算0.97
Gemini 3.1 Pro Previewpass^5 (All 5 Attempts)~41%估算0.30
Kim K3 (max)pass@1 (Given Attempt)~58%估算0.50
Kim K3 (max)pass@5 (At Least Once)~75%估算0.50
Kim K3 (max)pass^5 (All 5 Attempts)~38%估算0.50
Claude Table 5pass@1 (Given Attempt)~63%估算0.50
Kim K2 (max)pass@1 (Given Attempt)~58%估算0.50
Claude Table 5pass@5 (At Least Once)~69%估算0.50
Kim K2 (max)pass@5 (At Least Once)~75%估算0.50
Claude Table 5pass^5 (All 5 Attempts)~46%估算0.50
Kim K2 (max)pass^5 (All 5 Attempts)~39%估算0.50
下载这张图的数据

Max 订阅者可以通过 API 取同样的数据。 API 文档

API · Max

用 API 调用这张图

Max 套餐可以取这张图的数字(每个数字都带来源),格式为 JSON 或 CSV,附重画规格;也可以让智能体通过 MCP 调用。图表 id:195dad6cb0db。

路径返回套餐
GET/api/v1/charts/195dad6cb0db标题、发布者、日期、图型、数据点数;用 Max 密钥时附数据链接开放
GET/api/v1/charts/195dad6cb0db/data每个数据点及其来源和置信度,加上重画规格。加 ?format=csv 得到 CSVMax
GET/api/v1/charts/195dad6cb0db/render?view=1本页使用的只读绘图视图开放
POST/mcp工具 get_chart_data 加这个 id,供 Claude、Cursor 等智能体使用Max
curlMax
curl -s https://viral-chart.com/api/v1/charts/195dad6cb0db/data \
  -H "Authorization: Bearer $VIRALCHART_KEY"
Claude CodeMax
claude mcp add --transport http viralchart https://viral-chart.com/mcp \
  --header "Authorization: Bearer $VIRALCHART_KEY"

每个密钥每分钟 60 次,超出返回 429 和 Retry-After。每个账号最多 5 个密钥,在账户页创建,只显示一次。没有 Max 时数据接口返回 402,并附套餐链接。这些数字描述的是发布者拥有的图,每个文件都带授权说明。

做一张这样的图

这张图的形式,你的数字。

实时预览。所有内容都留在你的设备上。

选择形式

简化形式:用我们自己的样式,不是原图的样子。你的数字从这张图的数据开始。

OpenAI 的更多数据

全部图表数据

常见问题

这些数字有多准?

它们由两遍独立读图估算得出,置信度 0.76(0 到 1)。图上印着的数字读得准,从坐标轴读出的值可能有几个百分点的偏差。

这些数据可以直接用吗?

这些数字描述的是 artificial-analysis 发布的图表。图片、版式和样式归他们所有。使用数字时请注明发布者,图片请用你自己的数据来做。

怎么拿到文件?

JSON、CSV 和 agent skill 文件在本页的邮箱解锁区。原型里它们是静态文件:/api/charts/195dad6cb0db.json 和 /api/charts/195dad6cb0db.skill.md。