メインコンテンツへスキップ

他機関の公表値

ターミナルでの作業 (Terminal Bench)

コマンドラインの環境で、プログラムの構築 / 設定 / データの処理などの作業をモデルに任せる課題です。

この表の見方

  • 上にあるほど評価が高く、「1〜⁠2 位」のように範囲で出るモデルどうしの差は誤差の範囲です。
  • 評価は、課題を作った機関などが公表した値です。
  • 測った条件がモデルごとに違うことがあるので、小さな差は気にしなくてよいです。
  • 価格は 100 万トークンあたりの目安で、読ませる分、書かせる分の順です。
  • 長さは、一度に読ませられる文章の量 (トークン) です。

1 位の誤差の幅

順位モデル開発元成功率
(%)
成功率の目盛 0〜⁠100
入力 ¥
/100 万
出力 ¥
/100 万
一度に
読める長さ
対応重み公開日価格と仕様
1〜5GPT-5.5OpenAI評価 84.7 ±4.1¥780¥4,700105 万OpenAI 公開 2026-⁠04 価格 ¥780 / ¥4,700 長さ 105 万
1〜6GPT-5.4OpenAI評価 81.8 ±3.9¥390¥2,400105 万OpenAI 公開 2026-⁠03 価格 ¥390 / ¥2,400 長さ 105 万
1〜6Claude Opus 4.7Anthropic評価 80.2 ±4.1¥780¥3,900100 万Anthropic 公開 2026-⁠04 価格 ¥780 / ¥3,900 長さ 100 万
1〜6Gemini 3.1 Pro (preview)Google評価 80.2 ±5.1¥310¥1,900約 105 万Google 公開 2026-⁠02 価格 ¥310 / ¥1,900 長さ 約 105 万
1〜6Claude Opus 4.6Anthropic評価 79.8 ±3.1¥780¥3,900100 万Anthropic 公開 2026-⁠02 価格 ¥780 / ¥3,900 長さ 100 万
2〜6GPT-5.3 CodexOpenAI評価 78.4 ±4.3¥270¥2,20040 万OpenAI 公開 2026-⁠02 価格 ¥270 / ¥2,200 長さ 40 万
7〜11Gemini 3 Pro (preview)Google評価 69.4 ±4.1——100 万Google 公開 2025-⁠11 価格 — 長さ 100 万
7〜13GPT-5.2 CodexOpenAI評価 66.5 ±6.0——40 万OpenAI 公開 2025-⁠12 価格 — 長さ 40 万
7〜13GPT-5.2OpenAI評価 64.9 ±5.4¥270¥2,20040 万OpenAI 公開 2025-⁠12 価格 ¥270 / ¥2,200 長さ 40 万
7〜13Gemini 3 Flash (preview)Google評価 64.3 ±5.5¥78¥470100 万Google 公開 2025-⁠12 価格 ¥78 / ¥470 長さ 100 万
7〜13Claude Opus 4.5Anthropic評価 63.1 ±5.3¥780¥3,90020 万Anthropic 公開 2025-⁠11 価格 ¥780 / ¥3,900 長さ 20 万
8〜13GPT-5.1 Codex MiniOpenAI評価 61.6 ±3.7——40 万OpenAI 公開 2025-⁠11 価格 — 長さ 40 万
8〜15GPT-5.1 CodexOpenAI評価 60.4 ±5.2——40 万OpenAI 公開 2025-⁠11 価格 — 長さ 40 万
13〜16Grok 4.20xAI評価 57.3——200 万xAI 公開 2026-⁠02 価格 — 長さ 200 万
13〜19Claude Sonnet 4.6Anthropic評価 53.4 ±5.5¥470¥2,400100 万Anthropic 公開 2026-⁠02 価格 ¥470 / ¥2,400 長さ 100 万
14〜19GLM-5⁠Z.ai評価 52.4 ±5.1¥160¥500約 20.5 万Z.ai 公開 2026-⁠02 価格 ¥160 / ¥500 長さ 約 20.5 万
15〜23GPT-5OpenAI評価 49.6 ±5.7¥200¥1,60040 万OpenAI 公開 2025-⁠08 価格 ¥200 / ¥1,600 長さ 40 万
15〜23GPT-5.1OpenAI評価 47.6 ±5.5¥200¥1,60040 万OpenAI 公開 2025-⁠11 価格 ¥200 / ¥1,600 長さ 40 万
15〜24Claude Sonnet 4.5Anthropic評価 46.5 ±4.6¥470¥2,40020 万Anthropic 公開 2025-⁠09 価格 ¥470 / ¥2,400 長さ 20 万
17〜23MiniMax-M2.7⁠MiniMax評価 45.1¥47¥190約 20.5 万MiniMax 公開 2026-⁠03 価格 ¥47 / ¥190 長さ 約 20.5 万
17〜26GPT-5 CodexOpenAI評価 44.3 ±5.3——40 万OpenAI 公開 2025-⁠09 価格 — 長さ 40 万
17〜28Kimi K2.5⁠Moonshot評価 43.2 ±5.6——約 26.2 万Moonshot 公開 2026-⁠01 価格 — 長さ 約 26.2 万
17〜28MiniMax-M2.5⁠MiniMax評価 42.7 ±5.5¥47¥190約 20.5 万MiniMax 公開 2026-⁠02 価格 ¥47 / ¥190 長さ 約 20.5 万
20〜31DeepSeek-V3.2⁠DeepSeek評価 39.6 ±5.4——12.8 万DeepSeek 公開 2025-⁠12 価格 — 長さ 12.8 万
21〜31Claude Opus 4.1Anthropic評価 38.0 ±5.1——20 万Anthropic 公開 2025-⁠08 価格 — 長さ 20 万
21〜32MiniMax-M2.1⁠MiniMax評価 36.6 ±5.7¥47¥190約 20.5 万MiniMax 公開 2025-⁠12 価格 ¥47 / ¥190 長さ 約 20.5 万
22〜32Kimi K2 (thinking)⁠Moonshot評価 35.7 ±5.5——約 26.2 万Moonshot 公開 2025-⁠11 価格 — 長さ 約 26.2 万
22〜32Claude Haiku 4.5Anthropic評価 35.5 ±5.7¥160¥78020 万Anthropic 公開 2025-⁠10 価格 ¥160 / ¥780 長さ 20 万
24〜34GPT-5 miniOpenAI評価 34.8 ±5.3¥39¥31040 万OpenAI 公開 2025-⁠08 価格 ¥39 / ¥310 長さ 40 万
24〜36GLM-4.7⁠Z.ai評価 33.4 ±5.6¥94¥340約 20.5 万Z.ai 公開 2025-⁠12 価格 ¥94 / ¥340 長さ 約 20.5 万
24〜37Gemini 2.5 ProGoogle評価 32.6 ±5.9¥200¥1,600100 万Google 公開 2025-⁠06 価格 ¥200 / ¥1,600 長さ 100 万
26〜38MiniMax-M2⁠MiniMax評価 30.0 ±5.4¥47¥190100 万MiniMax 公開 2025-⁠10 価格 ¥47 / ¥190 長さ 100 万
29〜39Kimi K2 (instruct)⁠Moonshot評価 27.8 ±4.9——約 13.1 万Moonshot 公開 2025-⁠07 価格 — 長さ 約 13.1 万
29〜39Grok 4xAI評価 27.2 ±6.1——25.6 万xAI 公開 2025-⁠07 価格 — 長さ 25.6 万
30〜39Qwen3 Coder 480B A35B (instruct)⁠Alibaba評価 27.2 ±5.0¥240¥1,200約 26.2 万Alibaba 公開 2025-⁠07 価格 ¥240 / ¥1,200 長さ 約 26.2 万
30〜40Grok Code Fast 1xAI評価 25.8 ±5.1——25.6 万—xAI 公開 2025-⁠08 価格 — 長さ 25.6 万
31〜42Qwen3.6 35B A3B⁠Alibaba評価 24.6 ±6.3¥59¥350約 26.2 万Alibaba 公開 2026-⁠04 価格 ¥59 / ¥350 長さ 約 26.2 万
32〜40GLM-4.6⁠Z.ai評価 24.5 ±4.8¥94¥340約 20.5 万Z.ai 公開 2025-⁠09 価格 ¥94 / ¥340 長さ 約 20.5 万
33〜42GPT-5 nanoOpenAI評価 21.8 ±5.5¥7.8¥6340 万OpenAI 公開 2025-⁠08 価格 ¥7.8 / ¥63 長さ 40 万
36〜42GPT-OSS 120B⁠OpenAI評価 18.7 ±5.3——12.8 万OpenAI 公開 2025-⁠08 価格 — 長さ 12.8 万

最高の成功率の推移

2025-06-17公開日2026-04-23
このページの読み方
  • 作業の後の状態をテストで確かめ、値は終えられた課題の割合です。課題を作った機関などが公表した値を集めた物です。
  • 成功率は、うまくいった回の割合です。差 1 ポイントは 100 回で 1 回ぶんです。
  • 対応の列の絵は左から、ツールを使える / 画像を読める / 決まった形 (JSON) で答えられる、です (薄い印は非対応か不明)。
  • オープンウェイトは、モデルの中身 (重み) が公開されていて、自分のパソコンやサーバーでも動かせるモデルです。オープンウェイトの印の無いモデルは、開発元のサービス (アプリや API) で使うのが基本です (重みの情報が無いモデルもあります)。
  • モデル名の横の ChatGPT などは、その開発元が一般向けに出しているサービスの名です。そのモデルがそのサービスで選べるかは、サービスの側で確かめてください。
  • 円は 1 ドル 157 円 (2026 年 10 月 23 日の欧州中央銀行の参考レート) で換算し、上 2 桁に丸めた目安です。

データ: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT)、更新 2026-⁠10-⁠24、データの出典