跳到主要内容

任务成绩

生物 / 化学 / 物理的专家级选择题 (只选取专家才能答对的部分、GPQA diamond)

从生物 / 化学 / 物理专家编写的选择题中,收集该领域专家答对、而多数领域外人士答错的题目组成的任务。

如何看这张表

  • 越靠上评价越高,像“第 1〜⁠2 名”这样以范围显示的模型之间的差在误差范围内。
  • 评价是共同题目中答对题目的比例 (%)。
  • ± 是重新测量时会变动的幅度,细微的差异不必在意。
  • 价格是每 100 万 token 的参考,依次为让它读的部分、让它写的部分。
  • 长度是一次能让它读的文本量 (token)。

第 1 名的误差幅度

排名模型开发方正确率
(%)
正确率的刻度 85〜⁠100
评测日期输入 $
/100 万
输出 $
/100 万
一次能读的
长度
支持权重发布日期价格与规格
1〜25Gemini 4 ArgonGoogle评价 99.2 ±3.2$2$101.05MGoogle 发布 2026-⁠09 价格 $2 / $10 长度 1.05M
1〜28GPT-6 AstraOpenAI评价 98.3 ±3.7$10$501.05MOpenAI 发布 2026-⁠09 价格 $10 / $50 长度 1.05M
1〜33Claude Sonnet 5.5Anthropic评价 98.0 ±3.7$2$101MAnthropic 发布 2026-⁠09 价格 $2 / $10 长度 1M
1〜34Gemini 3.8 FlashGoogle评价 97.8 ±3.8$0.75$3.751.05MGoogle 发布 2026-⁠09 价格 $0.75 / $3.75 长度 1.05M
1〜34GPT-6.1 SolOpenAI评价 97.8 ±3.8$2$101.05MOpenAI 发布 2026-⁠09 价格 $2 / $10 长度 1.05M
1〜41Gemini 3.7 FlashGoogle评价 97.0 ±3.7$0.75$3.751.05MGoogle 发布 2026-⁠08 价格 $0.75 / $3.75 长度 1.05M
1〜46GPT-5.4 ProOpenAI评价 96.7 ±4.4$30$1801.05MOpenAI 发布 2026-⁠03 价格 $30 / $180 长度 1.05M
1〜47Gemini 3.1 Pro (preview)Google评价 96.4 ±4.4$2$121.05MGoogle 发布 2026-⁠02 价格 $2 / $12 长度 1.05M
1〜46GPT-6 SolOpenAI评价 96.3 ±4.1$2$101.05MOpenAI 发布 2026-⁠09 价格 $2 / $10 长度 1.05M
1〜47Gemini 3.6 FlashGoogle评价 96.0 ±3.8$0.75$3.751.05MGoogle 发布 2026-⁠07 价格 $0.75 / $3.75 长度 1.05M
1〜48GPT-5.5OpenAI评价 95.8 ±4.2$5$301.05MOpenAI 发布 2026-⁠04 价格 $5 / $30 长度 1.05M
1〜47Grok 4.6xAI评价 95.8 ±3.9$2$6500KxAI 发布 2026-⁠08 价格 $2 / $6 长度 500K
1〜48GPT-5.5 ProOpenAI评价 95.7 ±4.3$30$1801.05MOpenAI 发布 2026-⁠04 价格 $30 / $180 长度 1.05M
1〜48Claude Opus 5Anthropic评价 95.7 ±4.0$5$251MAnthropic 发布 2026-⁠07 价格 $5 / $25 长度 1M
1〜50GPT-5.6 SolOpenAI评价 95.1 ±4.3$4$201.05MOpenAI 发布 2026-⁠07 价格 $4 / $20 长度 1.05M
1〜50Grok 4.5xAI评价 95.0 ±3.9$2$6500KxAI 发布 2026-⁠07 价格 $2 / $6 长度 500K
1〜54GPT-5.6 TerraOpenAI评价 94.9 ±4.2$2$121.05MOpenAI 发布 2026-⁠07 价格 $2 / $12 长度 1.05M
1〜56GPT-5.4OpenAI评价 94.9 ±4.9$2.5$151.05MOpenAI 发布 2026-⁠03 价格 $2.5 / $15 长度 1.05M
1〜55DeepSeek-V4.1 Flash (2026-⁠10)⁠DeepSeek评价 94.7 ±4.3$0.15$0.61MDeepSeek 发布 2026-⁠10 价格 $0.15 / $0.6 长度 1M
1〜55Kimi K3⁠Moonshot评价 94.6 ±4.1$3$151.05MMoonshot 发布 2026-⁠07 价格 $3 / $15 长度 1.05M
1〜58Gemini 3.5 FlashGoogle评价 94.2 ±4.5$1.5$91.05MGoogle 发布 2026-⁠05 价格 $1.5 / $9 长度 1.05M
1〜58Grok 4.7xAI评价 94.1 ±4.2$2$6500KxAI 发布 2026-⁠09 价格 $2 / $6 长度 500K
1〜58Qwen3.8 MaxAlibaba评价 94.0 ±4.6$2$61MAlibaba 发布 2026-⁠08 价格 $2 / $6 长度 1M
1〜58Gemini 3 Pro (preview)Google评价 93.9 ±4.5——1MGoogle 发布 2025-⁠11 价格 — 长度 1M
1〜62Qwen3.8 Max (2026-⁠09)Alibaba评价 93.5 ±4.7——1MAlibaba 发布 2026-⁠09 价格 — 长度 1M
2〜64GLM-5.2⁠Z.ai评价 92.9 ±4.4$1.4$4.41MZ.ai 发布 2026-⁠06 价格 $1.4 / $4.4 长度 1M
3〜64DeepSeek-V4 Pro (2026-⁠08)⁠DeepSeek评价 92.6 ±4.1$0.66$1.981MDeepSeek 发布 2026-⁠08 价格 $0.66 / $1.98 长度 1M
2〜66GPT-5.6 LunaOpenAI评价 92.5 ±4.7$0.2$1.21.05MOpenAI 发布 2026-⁠07 价格 $0.2 / $1.2 长度 1.05M
2〜69GPT-5.2OpenAI评价 92.2 ±4.9$1.75$14400KOpenAI 发布 2025-⁠12 价格 $1.75 / $14 长度 400K
3〜72Claude Opus 4.8Anthropic评价 91.7 ±5.2$5$251MAnthropic 发布 2026-⁠05 价格 $5 / $25 长度 1M
4〜69DeepSeek-V4 Flash (2026-⁠07)⁠DeepSeek评价 91.7 ±4.8——1MDeepSeek 发布 2026-⁠07 价格 — 长度 1M
3〜73DeepSeek-V4 Pro⁠DeepSeek评价 91.5 ±5.6$0.66$1.981MDeepSeek 发布 2026-⁠04 价格 $0.66 / $1.98 长度 1M
6〜69GLM-5.3⁠Z.ai评价 91.5 ±4.3$1.4$4.41MZ.ai 发布 2026-⁠08 价格 $1.4 / $4.4 长度 1M
3〜73MiniMax-M3⁠MiniMax评价 91.5 ±5.6$0.3$1.21.05MMiniMax 发布 2026-⁠06 价格 $0.3 / $1.2 长度 1.05M
3〜73Qwen3.7 MaxAlibaba评价 91.5 ±5.6$2.5$7.51MAlibaba 发布 2026-⁠05 价格 $2.5 / $7.5 长度 1M
6〜72Kimi K2.6⁠Moonshot评价 91.4 ±4.7$0.95$4262.1KMoonshot 发布 2026-⁠04 价格 $0.95 / $4 长度 262.1K
6〜73Claude Opus 5.5Anthropic评价 91.1 ±5.3$4$201MAnthropic 发布 2026-⁠09 价格 $4 / $20 长度 1M
7〜73Claude Opus 4.6Anthropic评价 91.0 ±4.6$5$251MAnthropic 发布 2026-⁠02 价格 $5 / $25 长度 1M
6〜73Claude Sonnet 5Anthropic评价 91.0 ±4.9$2$101MAnthropic 发布 2026-⁠06 价格 $2 / $10 长度 1M
6〜73GPT-6 LunaOpenAI评价 90.9 ±5.0$0.1$0.51.05MOpenAI 发布 2026-⁠09 价格 $0.1 / $0.5 长度 1.05M

最高正确率的变化

2023-03-14发布日期2026-10-17
如何阅读本页
  • 数值为正确率。
  • 支持一栏的图标从左起依次为:能使用工具 / 能读图片 / 能以固定格式 (JSON) 回答 (浅色标记为不支持或不明)。
  • 开放权重是指模型的内容 (权重) 已经公开、在自己的电脑或服务器上也能运行的模型。没有开放权重标记的模型,一般通过开发方的服务 (应用或 API) 使用 (也有没有权重信息的模型)。
  • 模型名称旁的 ChatGPT 等,是该开发方面向大众提供的服务名称。该模型能否在那个服务中选用,请在服务一方确认。

数据:Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT),更新于 2026-⁠10-⁠24,数据来源