跳到主要内容

任务成绩

新的编程竞赛题 (LCB、英语题目)

用编程竞赛平台上出现的新题目让模型编写代码,并按是否通过测试来测量的任务。

如何看这张表

  • 越靠上评价越高,像“第 1〜⁠2 名”这样以范围显示的模型之间的差在误差范围内。
  • 评价是共同题目中答对题目的比例 (%)。
  • 差 3 就是 100 题中差 3 题。
  • 价格是每 100 万 token 的参考,依次为让它读的部分、让它写的部分。
  • 长度是一次能让它读的文本量 (token)。
排名模型开发方正确率
(%)
正确率的刻度 40〜⁠100
评测日期输入 $
/100 万
输出 $
/100 万
一次能读的
长度
支持权重发布日期价格与规格
1Gemma 4 31B⁠Google评价 81.0——262.1KGoogle 发布 2026-⁠04 价格 — 长度 262.1K
2Gemma 4 26B A4B⁠Google评价 75.5$0.15$0.6262.1KGoogle 发布 2026-⁠04 价格 $0.15 / $0.6 长度 262.1K
3Qwen3 235B A22B (thinking)⁠Alibaba评价 73.1——262.1KAlibaba 发布 2025-⁠07 价格 — 长度 262.1K
4GPT-5.4OpenAI评价 72.3$2.5$151.05MOpenAI 发布 2026-⁠03 价格 $2.5 / $15 长度 1.05M
5GPT-OSS-Swallow-120B-RL-v0.1Swallow (東京科学大学)评价 71.1—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
6NVIDIA Nemotron 3 Super 120B A12B⁠NVIDIA评价 69.1——262.1KNVIDIA 发布 2026-⁠03 价格 — 长度 262.1K
7Qwen3 Next 80B A3B⁠Alibaba评价 68.3$0.5$6131.1KAlibaba 发布 2025-⁠09 价格 $0.5 / $6 长度 131.1K
8GPT-5 miniOpenAI评价 67.8$0.25$2400KOpenAI 发布 2025-⁠08 价格 $0.25 / $2 长度 400K
9GPT-5OpenAI评价 67.6$1.25$10400KOpenAI 发布 2025-⁠08 价格 $1.25 / $10 长度 400K
10GPT-OSS-Swallow-20B-RL-v0.1Swallow (東京科学大学)评价 66.5—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
11o3OpenAI评价 64.9$2$8200KOpenAI 发布 2025-⁠04 价格 $2 / $8 长度 200K
12GPT-OSS 120B⁠OpenAI评价 64.7——128KOpenAI 发布 2025-⁠08 价格 — 长度 128K
13〜14Qwen3.5 122B A10B⁠Alibaba评价 63.8$0.4$3.2262.1KAlibaba 发布 2026-⁠02 价格 $0.4 / $3.2 长度 262.1K
13〜14Qwen3-Swallow-32B-RL-v0.2Swallow (東京科学大学)评价 63.8—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
15Qwen3.5 27B⁠Alibaba评价 63.5$0.3$2.4262.1KAlibaba 发布 2026-⁠02 价格 $0.3 / $2.4 长度 262.1K
16GPT-OSS-Swallow-120B-SFT-v0.1Swallow (東京科学大学)评价 63.4—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
17Qwen3-Swallow-30B-A3B-RL-v0.2Swallow (東京科学大学)评价 61.8—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
18GPT-OSS 20B⁠OpenAI评价 59.9——131KOpenAI 发布 2025-⁠08 价格 — 长度 131K
19GPT-OSS-Swallow-20B-SFT-v0.1Swallow (東京科学大学)评价 58.9—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
20Qwen3.5 35B A3B⁠Alibaba评价 58.4$0.25$2262.1KAlibaba 发布 2026-⁠02 价格 $0.25 / $2 长度 262.1K
21〜22Qwen3 30B A3B⁠Alibaba评价 57.3——128KAlibaba 发布 2025-⁠04 价格 — 长度 128K
21〜22Qwen3 32B⁠Alibaba评价 57.3$0.7$2.8131.1KAlibaba 发布 2025-⁠04 价格 $0.7 / $2.8 长度 131.1K
23OLMo 3 32B Think⁠Ai2评价 56.9————Ai2 发布 — 价格 — 长度 —
24Qwen3 Next 80B A3B (instruct)⁠Alibaba评价 55.9$0.5$2129KAlibaba 发布 2025-⁠09 价格 $0.5 / $2 长度 129K
25Qwen3 14B⁠Alibaba评价 55.7$0.35$1.4131.1KAlibaba 发布 2025-⁠04 价格 $0.35 / $1.4 长度 131.1K
26Gemma 4 E4BGoogle评价 54.1——131.1K——Google 发布 — 价格 — 长度 131.1K
27Qwen3-Swallow-32B-SFT-v0.2Swallow (東京科学大学)评价 53.7—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
28Qwen3-Swallow-32B-CPT-v0.2Swallow (東京科学大学)评价 53.2—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
29ABEJA-QwQ32b-Reasoning-Japanese-v1.0ABEJA评价 52.9—————ABEJA 发布 — 价格 — 长度 —
30Qwen3-Swallow-8B-RL-v0.2Swallow (東京科学大学)评价 52.1—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
31Qwen3-Swallow-30B-A3B-SFT-v0.2Swallow (東京科学大学)评价 50.5—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
32o3-miniOpenAI评价 50.3$1.1$4.4200KOpenAI 发布 2025-⁠01 价格 $1.1 / $4.4 长度 200K
33Qwen3 8B⁠Alibaba评价 50.2$0.18$0.7131.1KAlibaba 发布 2025-⁠04 价格 $0.18 / $0.7 长度 131.1K
34NVIDIA-Nemotron-Nano-9B-v2-JapaneseNVIDIA评价 50.1—————NVIDIA 发布 — 价格 — 长度 —
35Qwen3 235B A22B (instruct)⁠Alibaba评价 49.4——128KAlibaba 发布 2025-⁠07 价格 — 长度 128K
36QwQ Bakeneko 32Brinna评价 48.3—————rinna 发布 — 价格 — 长度 —
37Qwen3 4B⁠Alibaba评价 48.2———Alibaba 发布 2025-⁠04 价格 — 长度 —
38Qwen3-Swallow-30B-A3B-CPT-v0.2Swallow (東京科学大学)评价 48.1—————Swallow (東京科学大学) 发布 — 价格 — 长度 —
39〜40DeepSeek-R1-Distill-Qwen-32B-JapaneseCyberAgent评价 47.3—————CyberAgent 发布 — 价格 — 长度 —
39〜40Qwen3.5 9B⁠Alibaba评价 47.3——262KAlibaba 发布 2026-⁠02 价格 — 长度 262K
如何阅读本页
  • 为避开训练时用过的题目,按题目发布的时间来选题。数值为通过的比例。
  • 正确率是答对题目的比例。差 1 个百分点相当于 100 题中的 1 题。
  • 支持一栏的图标从左起依次为:能使用工具 / 能读图片 / 能以固定格式 (JSON) 回答 (浅色标记为不支持或不明)。
  • 开放权重是指模型的内容 (权重) 已经公开、在自己的电脑或服务器上也能运行的模型。没有开放权重标记的模型,一般通过开发方的服务 (应用或 API) 使用 (也有没有权重信息的模型)。
  • 模型名称旁的 ChatGPT 等,是该开发方面向大众提供的服务名称。该模型能否在那个服务中选用,请在服务一方确认。

数据:Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT),更新于 2026-⁠10-⁠24,数据来源