任务成绩
未公开的数学题 (旧版、FrontierMath 2025-02)
由数学家编写并验证的未公开数学题中，覆盖本科高年级到研究入门水平的一档 (Tiers 1-3) 的旧版。
后继的基准测试: FrontierMath Tiers 1-3 v2
如何看这张表
- 越靠上评价越高，像“第 1〜2 名”这样以范围显示的模型之间的差在误差范围内。
- 评价是共同题目中答对题目的比例 (%)。
- ± 是重新测量时会变动的幅度，细微的差异不必在意。
- 价格是每 100 万 token 的参考，依次为让它读的部分、让它写的部分。
- 长度是一次能让它读的文本量 (token)。
第 1 名的误差幅度
| 排名 | 模型 | 开发方 | 正确率 (%) | 评测日期 | 输入 $ /100 万 | 输出 $ /100 万 | 一次能读的 长度 | 支持 | 权重 | 发布日期 | 价格与规格 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| 1〜5 | GPT-5.5 Pro | OpenAI | 评价 91.9 ±10.0 | $30 | $180 | 1.05M | OpenAI 发布 2026-04 价格 $30 / $180 长度 1.05M | ||||
| 1〜6 | GPT-5.5 | OpenAI | 评价 90.7 ±10.0 | $5 | $30 | 1.05M | OpenAI 发布 2026-04 价格 $5 / $30 长度 1.05M | ||||
| 1〜6 | GPT-5.4 Pro | OpenAI | 评价 87.7 ±10.0 | $30 | $180 | 1.05M | OpenAI 发布 2026-03 价格 $30 / $180 长度 1.05M | ||||
| 1〜8 | GPT-5.4 | OpenAI | 评价 83.5 ±10.0 | $2.5 | $15 | 1.05M | OpenAI 发布 2026-03 价格 $2.5 / $15 长度 1.05M | ||||
| 1〜8 | Claude Opus 4.8 | Anthropic | 评价 82.9 ±10.1 | $5 | $25 | 1M | Anthropic 发布 2026-05 价格 $5 / $25 长度 1M | ||||
| 2〜13 | Claude Opus 4.7 | Anthropic | 评价 76.8 ±10.0 | $5 | $25 | 1M | Anthropic 发布 2026-04 价格 $5 / $25 长度 1M | ||||
| 4〜15 | Claude Opus 4.6 | Anthropic | 评价 71.4 ±10.0 | $5 | $25 | 1M | Anthropic 发布 2026-02 价格 $5 / $25 长度 1M | ||||
| 4〜15 | GPT-5.2 | OpenAI | 评价 71.4 ±10.0 | $1.75 | $14 | 400K | OpenAI 发布 2025-12 价格 $1.75 / $14 长度 400K | ||||
| 6〜17 | Muse Spark | Meta | 评价 68.4 ±10.0 | — | — | — | Meta 发布 2026-04 价格 — 长度 — | ||||
| 6〜17 | Gemini 3.5 Flash | 评价 68.4 ±9.9 | $1.5 | $9 | 1.05M | Google 发布 2026-05 价格 $1.5 / $9 长度 1.05M | |||||
| 6〜17 | Kimi K2.6 | Moonshot | 评价 68.4 ±9.9 | $0.95 | $4 | 262.1K | Moonshot 发布 2026-04 价格 $0.95 / $4 长度 262.1K | ||||
| 6〜18 | Gemini 3 Pro (preview) | 评价 66.0 ±9.8 | — | — | 1M | Google 发布 2025-11 价格 — 长度 1M | |||||
| 6〜18 | Gemini 3.1 Pro (preview) | 评价 64.7 ±9.6 | $2 | $12 | 1.05M | Google 发布 2026-02 价格 $2 / $12 长度 1.05M | |||||
| 7〜19 | Gemini 3 Flash (preview) | 评价 62.5 ±9.7 | $0.5 | $3 | 1M | Google 发布 2025-12 价格 $0.5 / $3 长度 1M | |||||
| 7〜23 | GLM-5.1 | Z.ai | 评价 58.7 ±9.5 | $1.4 | $4.4 | 200K | Z.ai 发布 2026-04 价格 $1.4 / $4.4 长度 200K | ||||
| 9〜24 | GPT-5 | OpenAI | 评价 56.9 ±9.5 | $1.25 | $10 | 400K | OpenAI 发布 2025-08 价格 $1.25 / $10 长度 400K | ||||
| 9〜24 | Claude Sonnet 4.6 | Anthropic | 评价 56.8 ±9.7 | $3 | $15 | 1M | Anthropic 发布 2026-02 价格 $3 / $15 长度 1M | ||||
| 12〜26 | GPT-5.1 | OpenAI | 评价 54.4 ±9.4 | $1.25 | $10 | 400K | OpenAI 发布 2025-11 价格 $1.25 / $10 长度 400K | ||||
| 14〜27 | Gemini 2.5 Deep Think (web) | 评价 50.9 ±9.3 | — | — | — | — | Google 发布 2025-08 价格 — 长度 — | ||||
| 15〜27 | GPT-5.4 mini | OpenAI | 评价 49.6 ±7.1 | $0.75 | $4.5 | 400K | OpenAI 发布 2026-03 价格 $0.75 / $4.5 长度 400K | ||||
| 15〜29 | Kimi K2.5 | Moonshot | 评价 48.9 ±8.9 | — | — | 262.1K | Moonshot 发布 2026-01 价格 — 长度 262.1K | ||||
| 15〜30 | GPT-5 mini | OpenAI | 评价 47.8 ±9.0 | $0.25 | $2 | 400K | OpenAI 发布 2025-08 价格 $0.25 / $2 长度 400K | ||||
| 15〜31 | Qwen3.6 Plus | Alibaba | 评价 46.0 ±8.9 | $0.5 | $3 | 1M | Alibaba 发布 2026-03 价格 $0.5 / $3 长度 1M | ||||
| 16〜31 | GPT-5.4 nano | OpenAI | 评价 45.4 ±8.9 | $0.2 | $1.25 | 400K | OpenAI 发布 2026-03 价格 $0.2 / $1.25 长度 400K | ||||
| 18〜32 | o4-mini | OpenAI | 评价 43.6 ±8.7 | $1.1 | $4.4 | 200K | OpenAI 发布 2025-04 价格 $1.1 / $4.4 长度 200K | ||||
| 19〜32 | Qwen3.6 Max (preview) | Alibaba | 评价 40.5 ±8.5 | $1.3 | $7.8 | 240K | Alibaba 发布 2026-04 价格 $1.3 / $7.8 长度 240K | ||||
| 18〜35 | DeepSeek-V3.2 | DeepSeek | 评价 38.8 ±14.1 | — | — | 128K | DeepSeek 发布 2025-12 价格 — 长度 128K | ||||
| 21〜34 | Kimi K2 (thinking) | Moonshot | 评价 37.6 ±8.4 | — | — | 262.1K | Moonshot 发布 2025-11 价格 — 长度 262.1K | ||||
| 21〜34 | Qwen3.5 Plus | Alibaba | 评价 36.9 ±8.2 | $0.4 | $2.4 | 1M | Alibaba 发布 2026-02 价格 $0.4 / $2.4 长度 1M | ||||
| 22〜34 | Claude Opus 4.5 | Anthropic | 评价 36.3 ±8.2 | $5 | $25 | 200K | Anthropic 发布 2025-11 价格 $5 / $25 长度 200K | ||||
| 23〜35 | Grok 4 | xAI | 评价 34.5 ±8.0 | — | — | 256K | xAI 发布 2025-07 价格 — 长度 256K | ||||
| 25〜35 | o3 | OpenAI | 评价 32.8 ±7.9 | $2 | $8 | 200K | OpenAI 发布 2025-04 价格 $2 / $8 长度 200K | ||||
| 27〜36 | GLM-5 | Z.ai | 评价 28.8 ±7.5 | $1 | $3.2 | 204.8K | Z.ai 发布 2026-02 价格 $1 / $3.2 长度 204.8K | ||||
| 27〜38 | Claude Sonnet 4.5 | Anthropic | 评价 26.7 ±7.3 | $3 | $15 | 200K | Anthropic 发布 2025-09 价格 $3 / $15 长度 200K | ||||
| 30〜39 | Gemini 2.5 Pro | 评价 24.8 ±7.0 | $1.25 | $10 | 1M | Google 发布 2025-06 价格 $1.25 / $10 长度 1M | |||||
| 33〜41 | o3-mini | OpenAI | 评价 21.8 ±6.7 | $1.1 | $4.4 | 200K | OpenAI 发布 2025-01 价格 $1.1 / $4.4 长度 200K | ||||
| 34〜44 | Gemini 2.5 Pro (preview, 2025-05) | 评价 18.1 ±6.2 | — | — | 1.05M | Google 发布 2025-05 价格 — 长度 1.05M | |||||
| 34〜44 | Qwen3.6 Flash | Alibaba | 评价 18.1 ±6.2 | $0.25 | $1.5 | 1M | Alibaba 发布 2026-04 价格 $0.25 / $1.5 长度 1M | ||||
| 35〜46 | o1 | OpenAI | 评价 16.3 ±5.9 | $15 | $60 | 128K | OpenAI 发布 2024-12 价格 $15 / $60 长度 128K | ||||
| 36〜49 | Qwen3 235B A22B (thinking) | Alibaba | 评价 14.9 ±5.7 | — | — | 262.1K | Alibaba 发布 2025-07 价格 — 长度 262.1K | ||||
| 36〜49 | GPT-5 nano | OpenAI | 评价 14.5 ±5.6 | $0.05 | $0.4 | 400K | OpenAI 发布 2025-08 价格 $0.05 / $0.4 长度 400K | ||||
| 37〜53 | Claude Opus 4.1 | Anthropic | 评价 12.7 ±5.2 | — | — | 200K | Anthropic 发布 2025-08 价格 — 长度 200K | ||||
| 37〜53 | Qwen3.5 Flash | Alibaba | 评价 10.9 ±4.9 | $0.1 | $0.4 | 1M | Alibaba 发布 2026-02 价格 $0.1 / $0.4 长度 1M | ||||
| 37〜53 | Claude Haiku 4.5 | Anthropic | 评价 10.4 ±4.8 | $1 | $5 | 200K | Anthropic 发布 2025-10 价格 $1 / $5 长度 200K | ||||
| 39〜53 | Grok 3 Mini (beta) | xAI | 评价 10.3 ±4.8 | — | — | — | xAI 发布 2025-04 价格 — 长度 — | ||||
| 39〜54 | GPT-4.1 | OpenAI | 评价 9.7 ±4.6 | $2 | $8 | 1.05M | OpenAI 发布 2025-04 价格 $2 / $8 长度 1.05M | ||||
| 40〜55 | Gemini 2.5 Flash | 评价 8.5 ±4.3 | $0.3 | $2.5 | 1M | Google 发布 2025-06 价格 $0.3 / $2.5 长度 1M | |||||
| 40〜59 | Claude Opus 4 | Anthropic | 评价 7.9 ±4.2 | — | — | 200K | Anthropic 发布 2025-05 价格 — 长度 200K | ||||
| 40〜59 | GPT-4.1 mini | OpenAI | 评价 7.9 ±4.2 | — | — | 1.05M | OpenAI 发布 2025-04 价格 — 长度 1.05M | ||||
| 42〜59 | Claude 3.7 Sonnet | Anthropic | 评价 7.3 ±4.0 | — | — | 200K | Anthropic 发布 2025-02 价格 — 长度 200K | ||||
| 42〜59 | Claude Sonnet 4 | Anthropic | 评价 7.3 ±4.0 | — | — | 200K | Anthropic 发布 2025-05 价格 — 长度 200K | ||||
| 42〜59 | GLM-4.6 | Z.ai | 评价 6.7 ±3.9 | $0.6 | $2.2 | 204.8K | Z.ai 发布 2025-09 价格 $0.6 / $2.2 长度 204.8K | ||||
| 42〜59 | Grok 3 (beta) | xAI | 评价 6.7 ±3.9 | — | — | — | xAI 发布 2025-04 价格 — 长度 — | ||||
| 46〜64 | GLM-4.7 | Z.ai | 评价 4.3 ±3.1 | $0.6 | $2.2 | 204.8K | Z.ai 发布 2025-12 价格 $0.6 / $2.2 长度 204.8K | ||||
| 47〜69 | Claude 3.5 Sonnet (2024-10) | Anthropic | 评价 3.6 ±2.9 | — | — | 200K | Anthropic 发布 2024-10 价格 — 长度 200K | ||||
| 48〜69 | DeepSeek-V3 | DeepSeek | 评价 3.0 ±2.6 | — | — | 128K | DeepSeek 发布 2024-12 价格 — 长度 128K | ||||
| 48〜69 | Gemini 2.0 Flash | 评价 3.0 ±2.6 | — | — | — | Google 发布 2025-02 价格 — 长度 — | |||||
| 48〜69 | o1-mini | OpenAI | 评价 3.0 ±2.6 | — | — | 128K | OpenAI 发布 2024-09 价格 — 长度 128K | ||||
| 48〜69 | Qwen Plus (2025-04) | Alibaba | 评价 3.0 ±2.6 | — | — | — | Alibaba 发布 2025-04 价格 — 长度 — | ||||
| 54〜71 | Claude 3.5 Sonnet (2024-06) | Anthropic | 评价 1.8 ±2.0 | — | — | 200K | Anthropic 发布 2024-06 价格 — 长度 200K | ||||
| 54〜71 | GPT-4.1 nano | OpenAI | 评价 1.8 ±2.0 | $0.1 | $0.4 | 1.05M | OpenAI 发布 2025-04 价格 $0.1 / $0.4 长度 1.05M | ||||
| 54〜71 | Qwen Max | Alibaba | 评价 1.8 ±2.0 | — | — | 128K | Alibaba 发布 2025-01 价格 — 长度 128K | ||||
| 54〜71 | Grok 2 (2024-12) | xAI | 评价 1.2 ±1.7 | — | — | — | xAI 发布 2024-12 价格 — 长度 — | ||||
| 54〜71 | Llama 4 Maverick (FP8) | Meta | 评价 1.2 ±1.7 | — | — | 1.05M | Meta 发布 2025-04 价格 — 长度 1.05M | ||||
| 55〜71 | Mistral Medium 3 | Mistral | 评价 0.6 ±1.2 | $0.4 | $2 | 128K | Mistral 发布 2025-05 价格 $0.4 / $2 长度 128K | ||||
| 55〜71 | Claude 3.5 Haiku | Anthropic | 评价 0.6 ±1.2 | — | — | 200K | Anthropic 发布 2024-10 价格 — 长度 200K | ||||
| 55〜71 | GPT-4o (2024-08) | OpenAI | 评价 0.6 ±1.2 | $2.5 | $10 | 128K | OpenAI 发布 2024-08 价格 $2.5 / $10 长度 128K | ||||
| 55〜71 | GPT-4o (2024-11) | OpenAI | 评价 0.6 ±1.2 | $2.5 | $10 | 128K | OpenAI 发布 2024-11 价格 $2.5 / $10 长度 128K | ||||
| 55〜71 | Mistral Large (2024-11) | Mistral | 评价 0.6 ±1.2 | — | — | 128K | Mistral 发布 2024-11 价格 — 长度 128K | ||||
| 60〜71 | Gemini 1.5 Flash 002 | 评价 0.0 ±0.0 | — | — | — | Google 发布 2024-09 价格 — 长度 — | |||||
| 60〜71 | Llama 4 Scout | Meta | 评价 0.0 ±0.0 | — | — | 128K | Meta 发布 2025-04 价格 — 长度 128K |
最高正确率的变化
2024-06-20发布日期2026-05-28
如何阅读本页
- 后继版本是修正了有误题目的 Tiers 1-3 v2。数值为正确率。
- 支持一栏的图标从左起依次为：能使用工具 / 能读图片 / 能以固定格式 (JSON) 回答 (浅色标记为不支持或不明)。
- 开放权重是指模型的内容 (权重) 已经公开、在自己的电脑或服务器上也能运行的模型。没有开放权重标记的模型，一般通过开发方的服务 (应用或 API) 使用 (也有没有权重信息的模型)。
- 模型名称旁的 ChatGPT 等，是该开发方面向大众提供的服务名称。该模型能否在那个服务中选用，请在服务一方确认。
数据：Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT)，更新于 2026-10-24，数据来源