メインコンテンツへスキップ

他機関の公表値

最難関の学術問題 (HLE)

数学 / 自然科学 / 人文など多くの分野の専門家が作り、作った時点のモデルが解けなかった物を選んで集めた問題です。

このデータの更新は 2026-⁠10-⁠24 で止まっています (前回の値)

この表の見方

  • 上にあるほど評価が高く、「1〜⁠2 位」のように範囲で出るモデルどうしの差は誤差の範囲です。
  • 評価は、課題を作った機関などが公表した値です。
  • 測った条件がモデルごとに違うことがあるので、小さな差は気にしなくてよいです。
  • 価格は 100 万トークンあたりの目安で、読ませる分、書かせる分の順です。
  • 長さは、一度に読ませられる文章の量 (トークン) です。

1 位の誤差の幅

順位モデル開発元正答率
(%)
正答率の目盛 0〜⁠60
入力 ¥
/100 万
出力 ¥
/100 万
一度に
読める長さ
対応重み公開日価格と仕様
1 位GPT-6 AstraOpenAI評価 52.5 ±4.0¥1,600¥7,800105 万OpenAI 公開 2026-⁠09 価格 ¥1,600 / ¥7,800 長さ 105 万
2〜6Claude Fable 5.1Anthropic評価 43.8 ±4.1¥1,600¥7,800100 万Anthropic 公開 2026-⁠09 価格 ¥1,600 / ¥7,800 長さ 100 万
2〜6Gemini 3.1 Pro (preview)Google評価 43.7 ±4.0¥310¥1,900約 105 万Google 公開 2026-⁠02 価格 ¥310 / ¥1,900 長さ 約 105 万
2〜6Claude Sonnet 5.5Anthropic評価 43.4 ±4.0¥310¥1,600100 万Anthropic 公開 2026-⁠09 価格 ¥310 / ¥1,600 長さ 100 万
2〜7Gemini 3.8 FlashGoogle評価 41.7 ±4.0¥120¥590約 105 万Google 公開 2026-⁠09 価格 ¥120 / ¥590 長さ 約 105 万
2〜7GPT-5.4 ProOpenAI評価 41.5 ±4.0¥4,700¥28,000105 万OpenAI 公開 2026-⁠03 価格 ¥4,700 / ¥28,000 長さ 105 万
5〜10Muse SparkMeta評価 37.6 ±4.0———Meta 公開 2026-⁠04 価格 — 長さ —
7〜11Gemini 3 Pro (preview)Google評価 34.4 ±3.9——100 万Google 公開 2025-⁠11 価格 — 長さ 100 万
7〜12GPT-5.4OpenAI評価 33.0 ±3.9¥390¥2,400105 万OpenAI 公開 2026-⁠03 価格 ¥390 / ¥2,400 長さ 105 万
7〜12Claude Opus 4.7Anthropic評価 33.0 ±3.9¥780¥3,900100 万Anthropic 公開 2026-⁠04 価格 ¥780 / ¥3,900 長さ 100 万
8〜13Claude Opus 4.6Anthropic評価 31.1 ±3.8¥780¥3,900100 万Anthropic 公開 2026-⁠02 価格 ¥780 / ¥3,900 長さ 100 万
9〜14GPT-5 ProOpenAI評価 28.2 ±3.7¥2,400¥19,00040 万OpenAI 公開 2025-⁠10 価格 ¥2,400 / ¥19,000 長さ 40 万
11〜15Claude Haiku 5.5Anthropic評価 26.6 ±3.8¥16¥78100 万Anthropic 公開 2026-⁠10 価格 ¥16 / ¥78 長さ 100 万
12〜18GPT-5.2OpenAI評価 24.2 ±3.6¥270¥2,20040 万OpenAI 公開 2025-⁠12 価格 ¥270 / ¥2,200 長さ 40 万
13〜19GPT-5OpenAI評価 21.6 ±3.5¥200¥1,60040 万OpenAI 公開 2025-⁠08 価格 ¥200 / ¥1,600 長さ 40 万
14〜19Claude Opus 4.5Anthropic評価 21.4 ±3.5¥780¥3,90020 万Anthropic 公開 2025-⁠11 価格 ¥780 / ¥3,900 長さ 20 万
14〜20Kimi K2.5⁠Moonshot評価 20.6 ±3.7——約 26.2 万Moonshot 公開 2026-⁠01 価格 — 長さ 約 26.2 万
14〜21GPT-5.1OpenAI評価 19.8 ±3.4¥200¥1,60040 万OpenAI 公開 2025-⁠11 価格 ¥200 / ¥1,600 長さ 40 万
15〜23Gemini 2.5 Pro (preview, 2025-⁠05)Google評価 17.7 ±3.3——約 105 万Google 公開 2025-⁠05 価格 — 長さ 約 105 万
17〜23o3OpenAI評価 16.3 ±3.3¥310¥1,30020 万OpenAI 公開 2025-⁠04 価格 ¥310 / ¥1,300 長さ 20 万
18〜23GPT-5 miniOpenAI評価 15.4 ±3.2¥39¥31040 万OpenAI 公開 2025-⁠08 価格 ¥39 / ¥310 長さ 40 万
19〜23Gemini 2.5 Pro (exp)Google評価 14.0 ±3.1——約 105 万Google 公開 2025-⁠03 価格 — 長さ 約 105 万
19〜23o4-miniOpenAI評価 13.9 ±3.1¥170¥69020 万OpenAI 公開 2025-⁠04 価格 ¥170 / ¥690 長さ 20 万
24〜28Claude Sonnet 4.5Anthropic評価 9.4 ±2.8¥470¥2,40020 万Anthropic 公開 2025-⁠09 価格 ¥470 / ¥2,400 長さ 20 万
24〜28Gemini 2.5 Flash (preview, 2025-⁠04)Google評価 7.6 ±2.6——約 105 万Google 公開 2025-⁠04 価格 — 長さ 約 105 万
24〜30Claude Opus 4.1Anthropic評価 7.1 ±2.6——20 万Anthropic 公開 2025-⁠08 価格 — 長さ 20 万
24〜34Gemini 2.5 Flash (preview, 2025-⁠05)Google評価 6.5 ±2.5——約 105 万Google 公開 2025-⁠05 価格 — 長さ 約 105 万
24〜35Claude Opus 4Anthropic評価 6.2 ±2.5——20 万Anthropic 公開 2025-⁠05 価格 — 長さ 20 万
26〜36Gemini 3.1 Flash-LiteGoogle評価 4.0 ±2.3¥39¥240約 105 万Google 公開 2026-⁠03 価格 ¥39 / ¥240 長さ 約 105 万
26〜37GLM-4.5⁠Z.ai評価 3.7 ±2.2¥94¥340約 13.1 万Z.ai 公開 2025-⁠08 価格 ¥94 / ¥340 長さ 約 13.1 万
27〜39GLM-4.5 Air⁠Z.ai評価 3.5 ±2.2¥31¥170約 13.1 万Z.ai 公開 2025-⁠07 価格 ¥31 / ¥170 長さ 約 13.1 万
27〜39o1-proOpenAI評価 3.5 ±2.2¥24,000¥94,00020 万OpenAI 公開 2025-⁠03 価格 ¥24,000 / ¥94,000 長さ 20 万
27〜39Claude 3.7 SonnetAnthropic評価 3.4 ±2.2——20 万Anthropic 公開 2025-⁠02 価格 — 長さ 20 万
27〜39o1OpenAI評価 3.3 ±2.2¥2,400¥9,40012.8 万OpenAI 公開 2024-⁠12 価格 ¥2,400 / ¥9,400 長さ 12.8 万
28〜39Claude Sonnet 4Anthropic評価 3.1 ±2.2——20 万Anthropic 公開 2025-⁠05 価格 — 長さ 20 万
29〜42Gemini 2.0 Flash (thinking, exp)Google評価 1.8 ±2.0———Google 公開 2024-⁠12 価格 — 長さ —
30〜44Llama 4 Maverick⁠Meta評価 0.9 ±1.9——約 52.4 万Meta 公開 2025-⁠04 価格 — 長さ 約 52.4 万
31〜44GPT-4.5 (preview)OpenAI評価 0.7 ±1.8———OpenAI 公開 2025-⁠02 価格 — 長さ —
31〜44GPT-4.1OpenAI評価 0.6 ±1.8¥310¥1,300約 105 万OpenAI 公開 2025-⁠04 価格 ¥310 / ¥1,300 長さ 約 105 万
36〜45Gemini 1.5 Pro 002Google評価 0.0 ±1.7———Google 公開 2024-⁠09 価格 — 長さ —

最高の正答率の推移

2024-09-24公開日2026-10-07
このページの読み方
  • 選択式と短い答えを書く形があり、値は正答率です。課題を作った機関などが公表した値を集めた物です。
  • 正答率は解けた問題の割合で、当て推量で取れる分は除いています。
  • 対応の列の絵は左から、ツールを使える / 画像を読める / 決まった形 (JSON) で答えられる、です (薄い印は非対応か不明)。
  • オープンウェイトは、モデルの中身 (重み) が公開されていて、自分のパソコンやサーバーでも動かせるモデルです。オープンウェイトの印の無いモデルは、開発元のサービス (アプリや API) で使うのが基本です (重みの情報が無いモデルもあります)。
  • モデル名の横の ChatGPT などは、その開発元が一般向けに出しているサービスの名です。そのモデルがそのサービスで選べるかは、サービスの側で確かめてください。
  • 円は 1 ドル 157 円 (2026 年 10 月 23 日の欧州中央銀行の参考レート) で換算し、上 2 桁に丸めた目安です。

データ: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT)、更新 2026-⁠10-⁠24、データの出典