跳到主要内容

其他机构的公布值

长篇故事的阅读理解 (Fiction.LiveBench)

让模型阅读长篇故事,并考查人物关系和事件经过的任务。

如何看这张表

  • 越靠上评价越高,像“第 1〜⁠2 名”这样以范围显示的模型之间的差在误差范围内。
  • 评价是任务制作机构等公布的值。
  • 测量条件可能因模型而异,细微的差异不必在意。
  • 价格是每 100 万 token 的参考,依次为让它读的部分、让它写的部分。
  • 长度是一次能让它读的文本量 (token)。
排名模型开发方正确率
(%)
正确率的刻度 0〜⁠100
输入 $
/100 万
输出 $
/100 万
一次能读的
长度
支持权重发布日期价格与规格
1o3OpenAI评价 100.0$2$8200KOpenAI 发布 2025-⁠04 价格 $2 / $8 长度 200K
2〜3GPT-5OpenAI评价 96.9$1.25$10400KOpenAI 发布 2025-⁠08 价格 $1.25 / $10 长度 400K
2〜3Grok 4xAI评价 96.9——256KxAI 发布 2025-⁠07 价格 — 长度 256K
4Gemini 2.5 Pro (exp)Google评价 90.6——1.05MGoogle 发布 2025-⁠03 价格 — 长度 1.05M
5o3-proOpenAI评价 88.9——200KOpenAI 发布 2025-⁠06 价格 — 长度 200K
6Gemini 2.5 Pro (preview, 2025-⁠05)Google评价 87.5——1.05MGoogle 发布 2025-⁠05 价格 — 长度 1.05M
7Kimi K2.5⁠Moonshot评价 78.1——262.1KMoonshot 发布 2026-⁠01 价格 — 长度 262.1K
8Grok 4 FastxAI评价 75.0——2MxAI 发布 2025-⁠09 价格 — 长度 2M
9Gemini 2.5 Pro (preview, 2025-⁠03)Google评价 71.9——1.05MGoogle 发布 2025-⁠03 价格 — 长度 1.05M
10〜11Qwen3 235B A22B (thinking)⁠Alibaba评价 68.8——262.1KAlibaba 发布 2025-⁠07 价格 — 长度 262.1K
10〜11Gemini 2.5 Flash (preview, 2025-⁠05)Google评价 68.8——1.05MGoogle 发布 2025-⁠05 价格 — 长度 1.05M
12〜13ChatGPT-4o (2025-⁠01)OpenAI评价 65.6———OpenAI 发布 2025-⁠01 价格 — 长度 —
12〜13Grok 3 Mini (beta)xAI评价 65.6———xAI 发布 2025-⁠04 价格 — 长度 —
14GPT-4.5 (preview)OpenAI评价 63.9———OpenAI 发布 2025-⁠02 价格 — 长度 —
15〜19Qwen3 Next 80B A3B (instruct)⁠Alibaba评价 62.5$0.5$2129KAlibaba 发布 2025-⁠09 价格 $0.5 / $2 长度 129K
15〜19Gemini 2.0 FlashGoogle评价 62.5———Google 发布 2025-⁠02 价格 — 长度 —
15〜19GPT-4.1OpenAI评价 62.5$2$81.05MOpenAI 发布 2025-⁠04 价格 $2 / $8 长度 1.05M
15〜19GPT-5 miniOpenAI评价 62.5$0.25$2400KOpenAI 发布 2025-⁠08 价格 $0.25 / $2 长度 400K
15〜19o4-miniOpenAI评价 62.5$1.1$4.4200KOpenAI 发布 2025-⁠04 价格 $1.1 / $4.4 长度 200K
20MiniMax-M1-⁠80k⁠MiniMax评价 59.4——1MMiniMax 发布 2025-⁠06 价格 — 长度 1M
21Grok 3 (beta)xAI评价 58.3———xAI 发布 2025-⁠04 价格 — 长度 —
22〜25Claude 3.7 SonnetAnthropic评价 53.1——200KAnthropic 发布 2025-⁠02 价格 — 长度 200K
22〜25DeepSeek-V3.1⁠DeepSeek评价 53.1——128KDeepSeek 发布 2025-⁠08 价格 — 长度 128K
22〜25Gemini 2.5 Flash (preview, 2025-⁠04)Google评价 53.1——1.05MGoogle 发布 2025-⁠04 价格 — 长度 1.05M
22〜25o1OpenAI评价 53.1$15$60128KOpenAI 发布 2024-⁠12 价格 $15 / $60 长度 128K
26GPT-4.1 miniOpenAI评价 46.9——1.05MOpenAI 发布 2025-⁠04 价格 — 长度 1.05M
27Qwen3 235B A22B (instruct)⁠Alibaba评价 44.4——128KAlibaba 发布 2025-⁠07 价格 — 长度 128K
28o3-miniOpenAI评价 43.8$1.1$4.4200KOpenAI 发布 2025-⁠01 价格 $1.1 / $4.4 长度 200K
29Kimi K2 (instruct, 2025-⁠09)⁠Moonshot评价 40.6——262.1KMoonshot 发布 2025-⁠09 价格 — 长度 262.1K
30〜32Claude Opus 4Anthropic评价 37.5——200KAnthropic 发布 2025-⁠05 价格 — 长度 200K
30〜32Gemini 2.0 Flash (thinking, exp)Google评价 37.5———Google 发布 2024-⁠12 价格 — 长度 —
30〜32Gemini 2.0 Pro (exp)Google评价 37.5——2.1MGoogle 发布 2025-⁠02 价格 — 长度 2.1M
33〜34Llama 4 Maverick⁠Meta评价 36.4——524.3KMeta 发布 2025-⁠04 价格 — 长度 524.3K
33〜34Claude Sonnet 4Anthropic评价 36.4——200KAnthropic 发布 2025-⁠05 价格 — 长度 200K
35DeepSeek-R1⁠DeepSeek评价 33.3——128KDeepSeek 发布 2025-⁠01 价格 — 长度 128K
36Llama 4 Scout⁠Meta评价 27.3——128KMeta 发布 2025-⁠04 价格 — 长度 128K
37〜38Gemini 2.5 Flash-Lite (preview, 2025-⁠06)Google评价 21.9——1.05MGoogle 发布 2025-⁠06 价格 — 长度 1.05M
37〜38GPT-5 nanoOpenAI评价 21.9$0.05$0.4400KOpenAI 发布 2025-⁠08 价格 $0.05 / $0.4 长度 400K
39GPT-4.1 nanoOpenAI评价 18.8$0.1$0.41.05MOpenAI 发布 2025-⁠04 价格 $0.1 / $0.4 长度 1.05M

最高正确率的变化

2024-12-17发布日期2026-01-27
如何阅读本页
  • 本页的数值是在约 12 万 token 的长度下阅读时的正确率。这是收集了任务制作机构等公布的值。
  • 正确率是答对题目的比例。差 1 个百分点相当于 100 题中的 1 题。
  • 支持一栏的图标从左起依次为:能使用工具 / 能读图片 / 能以固定格式 (JSON) 回答 (浅色标记为不支持或不明)。
  • 开放权重是指模型的内容 (权重) 已经公开、在自己的电脑或服务器上也能运行的模型。没有开放权重标记的模型,一般通过开发方的服务 (应用或 API) 使用 (也有没有权重信息的模型)。
  • 模型名称旁的 ChatGPT 等,是该开发方面向大众提供的服务名称。该模型能否在那个服务中选用,请在服务一方确认。

数据:Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT),更新于 2026-⁠10-⁠24,数据来源