課題の成績
未公開の数学問題 (旧版、FrontierMath 2025-02)
数学者が作って検証した未公開の数学問題のうち、学部上級から研究の入口までの水準を扱う段 (Tiers 1-3) の旧版です。
後継のベンチマーク: FrontierMath Tiers 1-3 v2
この表の見方
- 上にあるほど評価が高く、「1〜2 位」のように範囲で出るモデルどうしの差は誤差の範囲です。
- 評価は、共通の問題のうち解けた問題の割合 (%) です。
- ± は測り直した時に動く幅で、小さな差は気にしなくてよいです。
- 価格は 100 万トークンあたりの目安で、読ませる分、書かせる分の順です。
- 長さは、一度に読ませられる文章の量 (トークン) です。
1 位の誤差の幅
| 順位 | モデル | 開発元 | 正答率 (%) | 評価日 | 入力 ¥ /100 万 | 出力 ¥ /100 万 | 一度に 読める長さ | 対応 | 重み | 公開日 | 価格と仕様 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| 1〜5 | GPT-5.5 Pro | OpenAI | 評価 91.9 ±10.0 | ¥4,700 | ¥28,000 | 105 万 | OpenAI 公開 2026-04 価格 ¥4,700 / ¥28,000 長さ 105 万 | ||||
| 1〜6 | GPT-5.5 | OpenAI | 評価 90.7 ±10.0 | ¥780 | ¥4,700 | 105 万 | OpenAI 公開 2026-04 価格 ¥780 / ¥4,700 長さ 105 万 | ||||
| 1〜6 | GPT-5.4 Pro | OpenAI | 評価 87.7 ±10.0 | ¥4,700 | ¥28,000 | 105 万 | OpenAI 公開 2026-03 価格 ¥4,700 / ¥28,000 長さ 105 万 | ||||
| 1〜8 | GPT-5.4 | OpenAI | 評価 83.5 ±10.0 | ¥390 | ¥2,400 | 105 万 | OpenAI 公開 2026-03 価格 ¥390 / ¥2,400 長さ 105 万 | ||||
| 1〜8 | Claude Opus 4.8 | Anthropic | 評価 82.9 ±10.1 | ¥780 | ¥3,900 | 100 万 | Anthropic 公開 2026-05 価格 ¥780 / ¥3,900 長さ 100 万 | ||||
| 2〜13 | Claude Opus 4.7 | Anthropic | 評価 76.8 ±10.0 | ¥780 | ¥3,900 | 100 万 | Anthropic 公開 2026-04 価格 ¥780 / ¥3,900 長さ 100 万 | ||||
| 4〜15 | Claude Opus 4.6 | Anthropic | 評価 71.4 ±10.0 | ¥780 | ¥3,900 | 100 万 | Anthropic 公開 2026-02 価格 ¥780 / ¥3,900 長さ 100 万 | ||||
| 4〜15 | GPT-5.2 | OpenAI | 評価 71.4 ±10.0 | ¥270 | ¥2,200 | 40 万 | OpenAI 公開 2025-12 価格 ¥270 / ¥2,200 長さ 40 万 | ||||
| 6〜17 | Muse Spark | Meta | 評価 68.4 ±10.0 | — | — | — | Meta 公開 2026-04 価格 — 長さ — | ||||
| 6〜17 | Gemini 3.5 Flash | 評価 68.4 ±9.9 | ¥240 | ¥1,400 | 約 105 万 | Google 公開 2026-05 価格 ¥240 / ¥1,400 長さ 約 105 万 | |||||
| 6〜17 | Kimi K2.6 | Moonshot | 評価 68.4 ±9.9 | ¥150 | ¥630 | 約 26.2 万 | Moonshot 公開 2026-04 価格 ¥150 / ¥630 長さ 約 26.2 万 | ||||
| 6〜18 | Gemini 3 Pro (preview) | 評価 66.0 ±9.8 | — | — | 100 万 | Google 公開 2025-11 価格 — 長さ 100 万 | |||||
| 6〜18 | Gemini 3.1 Pro (preview) | 評価 64.7 ±9.6 | ¥310 | ¥1,900 | 約 105 万 | Google 公開 2026-02 価格 ¥310 / ¥1,900 長さ 約 105 万 | |||||
| 7〜19 | Gemini 3 Flash (preview) | 評価 62.5 ±9.7 | ¥78 | ¥470 | 100 万 | Google 公開 2025-12 価格 ¥78 / ¥470 長さ 100 万 | |||||
| 7〜23 | GLM-5.1 | Z.ai | 評価 58.7 ±9.5 | ¥220 | ¥690 | 20 万 | Z.ai 公開 2026-04 価格 ¥220 / ¥690 長さ 20 万 | ||||
| 9〜24 | GPT-5 | OpenAI | 評価 56.9 ±9.5 | ¥200 | ¥1,600 | 40 万 | OpenAI 公開 2025-08 価格 ¥200 / ¥1,600 長さ 40 万 | ||||
| 9〜24 | Claude Sonnet 4.6 | Anthropic | 評価 56.8 ±9.7 | ¥470 | ¥2,400 | 100 万 | Anthropic 公開 2026-02 価格 ¥470 / ¥2,400 長さ 100 万 | ||||
| 12〜26 | GPT-5.1 | OpenAI | 評価 54.4 ±9.4 | ¥200 | ¥1,600 | 40 万 | OpenAI 公開 2025-11 価格 ¥200 / ¥1,600 長さ 40 万 | ||||
| 14〜27 | Gemini 2.5 Deep Think (web) | 評価 50.9 ±9.3 | — | — | — | — | Google 公開 2025-08 価格 — 長さ — | ||||
| 15〜27 | GPT-5.4 mini | OpenAI | 評価 49.6 ±7.1 | ¥120 | ¥710 | 40 万 | OpenAI 公開 2026-03 価格 ¥120 / ¥710 長さ 40 万 | ||||
| 15〜29 | Kimi K2.5 | Moonshot | 評価 48.9 ±8.9 | — | — | 約 26.2 万 | Moonshot 公開 2026-01 価格 — 長さ 約 26.2 万 | ||||
| 15〜30 | GPT-5 mini | OpenAI | 評価 47.8 ±9.0 | ¥39 | ¥310 | 40 万 | OpenAI 公開 2025-08 価格 ¥39 / ¥310 長さ 40 万 | ||||
| 15〜31 | Qwen3.6 Plus | Alibaba | 評価 46.0 ±8.9 | ¥78 | ¥470 | 100 万 | Alibaba 公開 2026-03 価格 ¥78 / ¥470 長さ 100 万 | ||||
| 16〜31 | GPT-5.4 nano | OpenAI | 評価 45.4 ±8.9 | ¥31 | ¥200 | 40 万 | OpenAI 公開 2026-03 価格 ¥31 / ¥200 長さ 40 万 | ||||
| 18〜32 | o4-mini | OpenAI | 評価 43.6 ±8.7 | ¥170 | ¥690 | 20 万 | OpenAI 公開 2025-04 価格 ¥170 / ¥690 長さ 20 万 | ||||
| 19〜32 | Qwen3.6 Max (preview) | Alibaba | 評価 40.5 ±8.5 | ¥200 | ¥1,200 | 24 万 | Alibaba 公開 2026-04 価格 ¥200 / ¥1,200 長さ 24 万 | ||||
| 18〜35 | DeepSeek-V3.2 | DeepSeek | 評価 38.8 ±14.1 | — | — | 12.8 万 | DeepSeek 公開 2025-12 価格 — 長さ 12.8 万 | ||||
| 21〜34 | Kimi K2 (thinking) | Moonshot | 評価 37.6 ±8.4 | — | — | 約 26.2 万 | Moonshot 公開 2025-11 価格 — 長さ 約 26.2 万 | ||||
| 21〜34 | Qwen3.5 Plus | Alibaba | 評価 36.9 ±8.2 | ¥63 | ¥380 | 100 万 | Alibaba 公開 2026-02 価格 ¥63 / ¥380 長さ 100 万 | ||||
| 22〜34 | Claude Opus 4.5 | Anthropic | 評価 36.3 ±8.2 | ¥780 | ¥3,900 | 20 万 | Anthropic 公開 2025-11 価格 ¥780 / ¥3,900 長さ 20 万 | ||||
| 23〜35 | Grok 4 | xAI | 評価 34.5 ±8.0 | — | — | 25.6 万 | xAI 公開 2025-07 価格 — 長さ 25.6 万 | ||||
| 25〜35 | o3 | OpenAI | 評価 32.8 ±7.9 | ¥310 | ¥1,300 | 20 万 | OpenAI 公開 2025-04 価格 ¥310 / ¥1,300 長さ 20 万 | ||||
| 27〜36 | GLM-5 | Z.ai | 評価 28.8 ±7.5 | ¥160 | ¥500 | 約 20.5 万 | Z.ai 公開 2026-02 価格 ¥160 / ¥500 長さ 約 20.5 万 | ||||
| 27〜38 | Claude Sonnet 4.5 | Anthropic | 評価 26.7 ±7.3 | ¥470 | ¥2,400 | 20 万 | Anthropic 公開 2025-09 価格 ¥470 / ¥2,400 長さ 20 万 | ||||
| 30〜39 | Gemini 2.5 Pro | 評価 24.8 ±7.0 | ¥200 | ¥1,600 | 100 万 | Google 公開 2025-06 価格 ¥200 / ¥1,600 長さ 100 万 | |||||
| 33〜41 | o3-mini | OpenAI | 評価 21.8 ±6.7 | ¥170 | ¥690 | 20 万 | OpenAI 公開 2025-01 価格 ¥170 / ¥690 長さ 20 万 | ||||
| 34〜44 | Gemini 2.5 Pro (preview, 2025-05) | 評価 18.1 ±6.2 | — | — | 約 105 万 | Google 公開 2025-05 価格 — 長さ 約 105 万 | |||||
| 34〜44 | Qwen3.6 Flash | Alibaba | 評価 18.1 ±6.2 | ¥39 | ¥240 | 100 万 | Alibaba 公開 2026-04 価格 ¥39 / ¥240 長さ 100 万 | ||||
| 35〜46 | o1 | OpenAI | 評価 16.3 ±5.9 | ¥2,400 | ¥9,400 | 12.8 万 | OpenAI 公開 2024-12 価格 ¥2,400 / ¥9,400 長さ 12.8 万 | ||||
| 36〜49 | Qwen3 235B A22B (thinking) | Alibaba | 評価 14.9 ±5.7 | — | — | 約 26.2 万 | Alibaba 公開 2025-07 価格 — 長さ 約 26.2 万 | ||||
| 36〜49 | GPT-5 nano | OpenAI | 評価 14.5 ±5.6 | ¥7.8 | ¥63 | 40 万 | OpenAI 公開 2025-08 価格 ¥7.8 / ¥63 長さ 40 万 | ||||
| 37〜53 | Claude Opus 4.1 | Anthropic | 評価 12.7 ±5.2 | — | — | 20 万 | Anthropic 公開 2025-08 価格 — 長さ 20 万 | ||||
| 37〜53 | Qwen3.5 Flash | Alibaba | 評価 10.9 ±4.9 | ¥16 | ¥63 | 100 万 | Alibaba 公開 2026-02 価格 ¥16 / ¥63 長さ 100 万 | ||||
| 37〜53 | Claude Haiku 4.5 | Anthropic | 評価 10.4 ±4.8 | ¥160 | ¥780 | 20 万 | Anthropic 公開 2025-10 価格 ¥160 / ¥780 長さ 20 万 | ||||
| 39〜53 | Grok 3 Mini (beta) | xAI | 評価 10.3 ±4.8 | — | — | — | xAI 公開 2025-04 価格 — 長さ — | ||||
| 39〜54 | GPT-4.1 | OpenAI | 評価 9.7 ±4.6 | ¥310 | ¥1,300 | 約 105 万 | OpenAI 公開 2025-04 価格 ¥310 / ¥1,300 長さ 約 105 万 | ||||
| 40〜55 | Gemini 2.5 Flash | 評価 8.5 ±4.3 | ¥47 | ¥390 | 100 万 | Google 公開 2025-06 価格 ¥47 / ¥390 長さ 100 万 | |||||
| 40〜59 | Claude Opus 4 | Anthropic | 評価 7.9 ±4.2 | — | — | 20 万 | Anthropic 公開 2025-05 価格 — 長さ 20 万 | ||||
| 40〜59 | GPT-4.1 mini | OpenAI | 評価 7.9 ±4.2 | — | — | 約 105 万 | OpenAI 公開 2025-04 価格 — 長さ 約 105 万 | ||||
| 42〜59 | Claude 3.7 Sonnet | Anthropic | 評価 7.3 ±4.0 | — | — | 20 万 | Anthropic 公開 2025-02 価格 — 長さ 20 万 | ||||
| 42〜59 | Claude Sonnet 4 | Anthropic | 評価 7.3 ±4.0 | — | — | 20 万 | Anthropic 公開 2025-05 価格 — 長さ 20 万 | ||||
| 42〜59 | GLM-4.6 | Z.ai | 評価 6.7 ±3.9 | ¥94 | ¥340 | 約 20.5 万 | Z.ai 公開 2025-09 価格 ¥94 / ¥340 長さ 約 20.5 万 | ||||
| 42〜59 | Grok 3 (beta) | xAI | 評価 6.7 ±3.9 | — | — | — | xAI 公開 2025-04 価格 — 長さ — | ||||
| 46〜64 | GLM-4.7 | Z.ai | 評価 4.3 ±3.1 | ¥94 | ¥340 | 約 20.5 万 | Z.ai 公開 2025-12 価格 ¥94 / ¥340 長さ 約 20.5 万 | ||||
| 47〜69 | Claude 3.5 Sonnet (2024-10) | Anthropic | 評価 3.6 ±2.9 | — | — | 20 万 | Anthropic 公開 2024-10 価格 — 長さ 20 万 | ||||
| 48〜69 | DeepSeek-V3 | DeepSeek | 評価 3.0 ±2.6 | — | — | 12.8 万 | DeepSeek 公開 2024-12 価格 — 長さ 12.8 万 | ||||
| 48〜69 | Gemini 2.0 Flash | 評価 3.0 ±2.6 | — | — | — | Google 公開 2025-02 価格 — 長さ — | |||||
| 48〜69 | o1-mini | OpenAI | 評価 3.0 ±2.6 | — | — | 12.8 万 | OpenAI 公開 2024-09 価格 — 長さ 12.8 万 | ||||
| 48〜69 | Qwen Plus (2025-04) | Alibaba | 評価 3.0 ±2.6 | — | — | — | Alibaba 公開 2025-04 価格 — 長さ — | ||||
| 54〜71 | Claude 3.5 Sonnet (2024-06) | Anthropic | 評価 1.8 ±2.0 | — | — | 20 万 | Anthropic 公開 2024-06 価格 — 長さ 20 万 | ||||
| 54〜71 | GPT-4.1 nano | OpenAI | 評価 1.8 ±2.0 | ¥16 | ¥63 | 約 105 万 | OpenAI 公開 2025-04 価格 ¥16 / ¥63 長さ 約 105 万 | ||||
| 54〜71 | Qwen Max | Alibaba | 評価 1.8 ±2.0 | — | — | 12.8 万 | Alibaba 公開 2025-01 価格 — 長さ 12.8 万 | ||||
| 54〜71 | Grok 2 (2024-12) | xAI | 評価 1.2 ±1.7 | — | — | — | xAI 公開 2024-12 価格 — 長さ — | ||||
| 54〜71 | Llama 4 Maverick (FP8) | Meta | 評価 1.2 ±1.7 | — | — | 約 105 万 | Meta 公開 2025-04 価格 — 長さ 約 105 万 | ||||
| 55〜71 | Mistral Medium 3 | Mistral | 評価 0.6 ±1.2 | ¥63 | ¥310 | 12.8 万 | Mistral 公開 2025-05 価格 ¥63 / ¥310 長さ 12.8 万 | ||||
| 55〜71 | Claude 3.5 Haiku | Anthropic | 評価 0.6 ±1.2 | — | — | 20 万 | Anthropic 公開 2024-10 価格 — 長さ 20 万 | ||||
| 55〜71 | GPT-4o (2024-08) | OpenAI | 評価 0.6 ±1.2 | ¥390 | ¥1,600 | 12.8 万 | OpenAI 公開 2024-08 価格 ¥390 / ¥1,600 長さ 12.8 万 | ||||
| 55〜71 | GPT-4o (2024-11) | OpenAI | 評価 0.6 ±1.2 | ¥390 | ¥1,600 | 12.8 万 | OpenAI 公開 2024-11 価格 ¥390 / ¥1,600 長さ 12.8 万 | ||||
| 55〜71 | Mistral Large (2024-11) | Mistral | 評価 0.6 ±1.2 | — | — | 12.8 万 | Mistral 公開 2024-11 価格 — 長さ 12.8 万 | ||||
| 60〜71 | Gemini 1.5 Flash 002 | 評価 0.0 ±0.0 | — | — | — | Google 公開 2024-09 価格 — 長さ — | |||||
| 60〜71 | Llama 4 Scout | Meta | 評価 0.0 ±0.0 | — | — | 12.8 万 | Meta 公開 2025-04 価格 — 長さ 12.8 万 |
最高の正答率の推移
2024-06-20公開日2026-05-28
このページの読み方
- 後継は誤りのある問題を直した Tiers 1-3 v2 です。値は正答率です。
- 対応の列の絵は左から、ツールを使える / 画像を読める / 決まった形 (JSON) で答えられる、です (薄い印は非対応か不明)。
- オープンウェイトは、モデルの中身 (重み) が公開されていて、自分のパソコンやサーバーでも動かせるモデルです。オープンウェイトの印の無いモデルは、開発元のサービス (アプリや API) で使うのが基本です (重みの情報が無いモデルもあります)。
- モデル名の横の ChatGPT などは、その開発元が一般向けに出しているサービスの名です。そのモデルがそのサービスで選べるかは、サービスの側で確かめてください。
- 円は 1 ドル 157 円 (2026 年 10 月 23 日の欧州中央銀行の参考レート) で換算し、上 2 桁に丸めた目安です。
データ: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT)、更新 2026-10-24、データの出典