跳到主要内容

任务成绩

通过反复游玩来进步的能力 (EBR-bench)

让模型反复游玩不太知名的桌游 Earthborne Rangers,看它能否一边做笔记一边进步的任务。

如何看这张表

  • 越靠上评价越高,像“第 1〜⁠2 名”这样以范围显示的模型之间的差在误差范围内。
  • 评价是完成共同任务的次数比例 (%)。
  • 差 3 就是 100 次中差 3 次,± 是重新测量时会变动的幅度。
  • 价格是每 100 万 token 的参考,依次为让它读的部分、让它写的部分。
  • 长度是一次能让它读的文本量 (token)。

第 1 名的误差幅度

排名模型开发方成功率
(%)
成功率的刻度 0〜⁠100
评测日期输入 $
/100 万
输出 $
/100 万
一次能读的
长度
支持权重发布日期价格与规格
1〜4GPT-6 AstraOpenAI评价 76.2 ±16.4$10$501.05MOpenAI 发布 2026-⁠09 价格 $10 / $50 长度 1.05M
1〜5Claude Opus 5.5Anthropic评价 71.4 ±13.8$4$201MAnthropic 发布 2026-⁠09 价格 $4 / $20 长度 1M
1〜6Gemini 4 ArgonGoogle评价 64.8 ±9.6$2$101.05MGoogle 发布 2026-⁠09 价格 $2 / $10 长度 1.05M
1〜8Claude Fable 5.1Anthropic评价 57.1 ±11.8$10$501MAnthropic 发布 2026-⁠09 价格 $10 / $50 长度 1M
2〜9GPT-6.1 SolOpenAI评价 54.3 ±11.3$2$101.05MOpenAI 发布 2026-⁠09 价格 $2 / $10 长度 1.05M
3〜9GPT-6 SolOpenAI评价 53.3 ±9.0$2$101.05MOpenAI 发布 2026-⁠09 价格 $2 / $10 长度 1.05M
4〜10Claude Opus 5Anthropic评价 45.7 ±7.0$5$251MAnthropic 发布 2026-⁠07 价格 $5 / $25 长度 1M
4〜10GPT-5.6 SolOpenAI评价 44.8 ±8.1$4$201.05MOpenAI 发布 2026-⁠07 价格 $4 / $20 长度 1.05M
5〜10Claude Haiku 5.5Anthropic评价 43.8 ±3.5$0.1$0.51MAnthropic 发布 2026-⁠10 价格 $0.1 / $0.5 长度 1M
7〜12Claude Fable 5Anthropic评价 39.5 ±3.9$10$501MAnthropic 发布 2026-⁠06 价格 $10 / $50 长度 1M
10〜13GPT-5.5OpenAI评价 34.3 ±3.9$5$301.05MOpenAI 发布 2026-⁠04 价格 $5 / $30 长度 1.05M
10〜15Muse WonderMeta评价 31.4 ±8.1$4$201.05MMeta 发布 2026-⁠10 价格 $4 / $20 长度 1.05M
11〜14Grok 4.6xAI评价 30.5 ±3.2$2$6500KxAI 发布 2026-⁠08 价格 $2 / $6 长度 500K
12〜14Claude Opus 4.8Anthropic评价 28.6 ±2.8$5$251MAnthropic 发布 2026-⁠05 价格 $5 / $25 长度 1M
14〜15GPT-5.4OpenAI评价 25.4$2.5$151.05MOpenAI 发布 2026-⁠03 价格 $2.5 / $15 长度 1.05M
16GPT-5.2OpenAI评价 23.0$1.75$14400KOpenAI 发布 2025-⁠12 价格 $1.75 / $14 长度 400K
17Claude Opus 4.7Anthropic评价 19.0$5$251MAnthropic 发布 2026-⁠04 价格 $5 / $25 长度 1M
18〜19Claude Opus 4.5Anthropic评价 14.3$5$25200KAnthropic 发布 2025-⁠11 价格 $5 / $25 长度 200K
18〜19Gemini 3.1 Pro (preview)Google评价 14.3$2$121.05MGoogle 发布 2026-⁠02 价格 $2 / $12 长度 1.05M
20〜21Claude Opus 4.6Anthropic评价 12.7$5$251MAnthropic 发布 2026-⁠02 价格 $5 / $25 长度 1M
20〜21GPT-5OpenAI评价 12.7$1.25$10400KOpenAI 发布 2025-⁠08 价格 $1.25 / $10 长度 400K
22〜23GLM-5.2⁠Z.ai评价 9.5$1.4$4.41MZ.ai 发布 2026-⁠06 价格 $1.4 / $4.4 长度 1M
22〜23Qwen3.7 MaxAlibaba评价 9.5$2.5$7.51MAlibaba 发布 2026-⁠05 价格 $2.5 / $7.5 长度 1M
24Claude Opus 4.1Anthropic评价 7.9——200KAnthropic 发布 2025-⁠08 价格 — 长度 200K
25Gemini 3.5 FlashGoogle评价 4.8$1.5$91.05MGoogle 发布 2026-⁠05 价格 $1.5 / $9 长度 1.05M
26〜27Claude Sonnet 4.5Anthropic评价 2.4$3$15200KAnthropic 发布 2025-⁠09 价格 $3 / $15 长度 200K
26〜27Kimi K2.6⁠Moonshot评价 2.4$0.95$4262.1KMoonshot 发布 2026-⁠04 价格 $0.95 / $4 长度 262.1K

最高成功率的变化

2025-08-05发布日期2026-10-12
如何阅读本页
  • 使用练习局之后的计分局中较好的一局的结果,数值为达成目标所占的比例。
  • 成功率是成功次数的比例。差 1 个百分点相当于 100 次中的 1 次。
  • 支持一栏的图标从左起依次为:能使用工具 / 能读图片 / 能以固定格式 (JSON) 回答 (浅色标记为不支持或不明)。
  • 开放权重是指模型的内容 (权重) 已经公开、在自己的电脑或服务器上也能运行的模型。没有开放权重标记的模型,一般通过开发方的服务 (应用或 API) 使用 (也有没有权重信息的模型)。
  • 模型名称旁的 ChatGPT 等,是该开发方面向大众提供的服务名称。该模型能否在那个服务中选用,请在服务一方确认。

数据:Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT),更新于 2026-⁠10-⁠24,数据来源