メインコンテンツへスキップ

課題の成績

研究水準の数学問題 (FrontierMath Tier 4 v2)

FrontierMath のうち、基本の段 (Tiers 1-⁠3) より難しい研究水準の問題を集めた拡張の段です。

この表の見方

  • 上にあるほど評価が高く、「1〜⁠2 位」のように範囲で出るモデルどうしの差は誤差の範囲です。
  • 評価は、共通の問題のうち解けた問題の割合 (%) です。
  • 差が 3 なら 100 問で 3 問ぶんの違いで、± は測り直した時に動く幅です。
  • 価格は 100 万トークンあたりの目安で、読ませる分、書かせる分の順です。
  • 長さは、一度に読ませられる文章の量 (トークン) です。
順位モデル開発元正答率
(%)
正答率の目盛 0〜⁠100
評価日入力 ¥
/100 万
出力 ¥
/100 万
一度に
読める長さ
対応重み公開日価格と仕様
1〜4GPT-6.1 SolOpenAI評価 100.0 ±0.0¥310¥1,600105 万OpenAI 公開 2026-⁠09 価格 ¥310 / ¥1,600 長さ 105 万
1〜6GPT-6 AstraOpenAI評価 97.6 ±4.7¥1,600¥7,800105 万OpenAI 公開 2026-⁠09 価格 ¥1,600 / ¥7,800 長さ 105 万
1〜9Claude Opus 5.5Anthropic評価 95.0 ±8.1¥630¥3,100100 万Anthropic 公開 2026-⁠09 価格 ¥630 / ¥3,100 長さ 100 万
2〜12Claude Fable 5Anthropic評価 90.2 ±9.0¥1,600¥7,800100 万Anthropic 公開 2026-⁠06 価格 ¥1,600 / ¥7,800 長さ 100 万
1〜13GPT-6 SolOpenAI評価 90.0 ±10.1¥310¥1,600105 万OpenAI 公開 2026-⁠09 価格 ¥310 / ¥1,600 長さ 105 万
2〜16Claude Fable 5.1Anthropic評価 87.8 ±10.1¥1,600¥7,800100 万Anthropic 公開 2026-⁠09 価格 ¥1,600 / ¥7,800 長さ 100 万
3〜16GPT-5.6 SolOpenAI評価 82.9 ±11.7¥630¥3,100105 万OpenAI 公開 2026-⁠07 価格 ¥630 / ¥3,100 長さ 105 万
3〜16Claude Sonnet 5.5Anthropic評価 80.5 ±12.3¥310¥1,600100 万Anthropic 公開 2026-⁠09 価格 ¥310 / ¥1,600 長さ 100 万
3〜16GPT-5.6 Sol ProOpenAI評価 80.5 ±12.3———OpenAI 公開 2026-⁠07 価格 — 長さ —
4〜18Gemini 4 ArgonGoogle評価 78.0 ±12.8¥310¥1,600約 105 万Google 公開 2026-⁠09 価格 ¥310 / ¥1,600 長さ 約 105 万
4〜18GPT-5.5 ProOpenAI評価 78.0 ±12.8¥4,700¥28,000105 万OpenAI 公開 2026-⁠04 価格 ¥4,700 / ¥28,000 長さ 105 万
4〜20AI co-mathematicianGoogle評価 75.6 ±13.1———Google 公開 2026-⁠05 価格 — 長さ —
5〜20Claude Opus 5Anthropic評価 73.2 ±13.7¥780¥3,900100 万Anthropic 公開 2026-⁠07 価格 ¥780 / ¥3,900 長さ 100 万
6〜20GPT-5.5OpenAI評価 72.5 ±14.0¥780¥4,700105 万OpenAI 公開 2026-⁠04 価格 ¥780 / ¥4,700 長さ 105 万
6〜20GPT-5.6 TerraOpenAI評価 70.7 ±14.1¥310¥1,900105 万OpenAI 公開 2026-⁠07 価格 ¥310 / ¥1,900 長さ 105 万
6〜20Muse WonderMeta評価 70.7 ±14.1¥630¥3,100約 105 万Meta 公開 2026-⁠10 価格 ¥630 / ¥3,100 長さ 約 105 万
10〜26GPT-5.6 LunaOpenAI評価 61.0 ±15.1¥31¥190105 万OpenAI 公開 2026-⁠07 価格 ¥31 / ¥190 長さ 105 万
10〜27GPT-5.4 ProOpenAI評価 58.5 ±15.3¥4,700¥28,000105 万OpenAI 公開 2026-⁠03 価格 ¥4,700 / ¥28,000 長さ 105 万
12〜28Claude Opus 4.8Anthropic評価 56.1 ±15.4¥780¥3,900100 万Anthropic 公開 2026-⁠05 価格 ¥780 / ¥3,900 長さ 100 万
12〜28GPT-6 LunaOpenAI評価 56.1 ±15.4¥16¥78105 万OpenAI 公開 2026-⁠09 価格 ¥16 / ¥78 長さ 105 万
17〜37GPT-5.4OpenAI評価 49.0 ±15.7¥390¥2,400105 万OpenAI 公開 2026-⁠03 価格 ¥390 / ¥2,400 長さ 105 万
17〜44Claude Haiku 5.5Anthropic評価 46.3 ±15.5¥16¥78100 万Anthropic 公開 2026-⁠10 価格 ¥16 / ¥78 長さ 100 万
17〜44DeepSeek-V4.1 Flash (2026-⁠10)⁠DeepSeek評価 46.3 ±15.5¥24¥94100 万DeepSeek 公開 2026-⁠10 価格 ¥24 / ¥94 長さ 100 万
17〜44Muse Spark 1.3Meta評価 46.3 ±15.5¥200¥670約 105 万Meta 公開 2026-⁠09 価格 ¥200 / ¥670 長さ 約 105 万
17〜44Qwen3.8 MaxAlibaba評価 46.3 ±15.5¥310¥940100 万Alibaba 公開 2026-⁠08 価格 ¥310 / ¥940 長さ 100 万
17〜44GPT-5.2 ProOpenAI評価 46.0 ±15.3¥3,300¥26,00040 万OpenAI 公開 2025-⁠12 価格 ¥3,300 / ¥26,000 長さ 40 万
18〜49Kimi K3⁠Moonshot評価 39.0 ±15.1¥470¥2,400約 105 万Moonshot 公開 2026-⁠07 価格 ¥470 / ¥2,400 長さ 約 105 万
19〜50Gemini 3.7 FlashGoogle評価 36.6 ±14.9¥120¥590約 105 万Google 公開 2026-⁠08 価格 ¥120 / ¥590 長さ 約 105 万
21〜55Qwen3.7 MaxAlibaba評価 34.1 ±14.7¥390¥1,200100 万Alibaba 公開 2026-⁠05 価格 ¥390 / ¥1,200 長さ 100 万
21〜55Qwen3.8 Max (2026-⁠09)Alibaba評価 34.1 ±14.7——100 万Alibaba 公開 2026-⁠09 価格 — 長さ 100 万
21〜56Claude Opus 4.7Anthropic評価 31.7 ±14.4¥780¥3,900100 万Anthropic 公開 2026-⁠04 価格 ¥780 / ¥3,900 長さ 100 万
21〜56Grok 4.6xAI評価 31.7 ±14.4¥310¥94050 万xAI 公開 2026-⁠08 価格 ¥310 / ¥940 長さ 50 万
21〜56Muse Spark Open⁠Meta評価 31.7 ±14.4——104 万Meta 公開 2026-⁠10 価格 — 長さ 104 万
21〜56GPT-5.2OpenAI評価 31.7 ±14.3¥270¥2,20040 万OpenAI 公開 2025-⁠12 価格 ¥270 / ¥2,200 長さ 40 万
21〜59Claude Sonnet 5Anthropic評価 29.3 ±14.1¥310¥1,600100 万Anthropic 公開 2026-⁠06 価格 ¥310 / ¥1,600 長さ 100 万
21〜59GLM-5.2⁠Z.ai評価 29.3 ±14.1¥220¥690100 万Z.ai 公開 2026-⁠06 価格 ¥220 / ¥690 長さ 100 万
21〜59GLM-5.3⁠Z.ai評価 29.3 ±14.1¥220¥690100 万Z.ai 公開 2026-⁠08 価格 ¥220 / ¥690 長さ 100 万
22〜59Claude Opus 4.6Anthropic評価 26.8 ±13.7¥780¥3,900100 万Anthropic 公開 2026-⁠02 価格 ¥780 / ¥3,900 長さ 100 万
22〜59DeepSeek-V4.1 Flash⁠DeepSeek評価 26.8 ±13.7——100 万DeepSeek 公開 2026-⁠09 価格 — 長さ 100 万
22〜59DeepSeek-V4 Pro (2026-⁠08)⁠DeepSeek評価 26.8 ±13.7¥100¥310100 万DeepSeek 公開 2026-⁠08 価格 ¥100 / ¥310 長さ 100 万

最高の正答率の推移

2025-01-31公開日2026-10-17
このページの読み方
  • モデルは Python を実行しながら解き、答えを関数として提出します。値は正答率です。
  • 正答率は解けた問題の割合です。差 1 ポイントは 100 問で 1 問ぶんです。
  • 対応の列の絵は左から、ツールを使える / 画像を読める / 決まった形 (JSON) で答えられる、です (薄い印は非対応か不明)。
  • オープンウェイトは、モデルの中身 (重み) が公開されていて、自分のパソコンやサーバーでも動かせるモデルです。オープンウェイトの印の無いモデルは、開発元のサービス (アプリや API) で使うのが基本です (重みの情報が無いモデルもあります)。
  • モデル名の横の ChatGPT などは、その開発元が一般向けに出しているサービスの名です。そのモデルがそのサービスで選べるかは、サービスの側で確かめてください。
  • 円は 1 ドル 157 円 (2026 年 10 月 23 日の欧州中央銀行の参考レート) で換算し、上 2 桁に丸めた目安です。

データ: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT)、更新 2026-⁠10-⁠24、データの出典