跳到主要内容

任务成绩

从英语到日语的翻译 (WMT20enja)

让模型把新闻文章的句子从英语译成日语,并按与人工制作的参考译文的接近程度来测量的任务。

如何看这张表

  • 越靠上评价越高,像“第 1〜⁠2 名”这样以范围显示的模型之间的差在误差范围内。
  • 评价是解答共同题目的成绩分数。
  • 细微的差异不必在意。
  • 价格是每 100 万 token 的参考,依次为让它读的部分、让它写的部分。
  • 长度是一次能让它读的文本量 (token)。
排名模型开发方分数分数的刻度 20〜⁠30评测日期日语
(人类评价)
输入 $
/100 万
输出 $
/100 万
一次能读的
长度
支持权重发布日期价格与规格
1Gemma 4 31B⁠Google评价 28.5———262.1KGoogle 发布 2026-⁠04 价格 — 长度 262.1K
2GPT-4o (2024-⁠08)OpenAI评价 28.21292排名第 124〜⁠185 名$2.5$10128KOpenAI 发布 2024-⁠08 价格 $2.5 / $10 长度 128K
3Gemma 4 26B A4B⁠Google评价 28.0—$0.15$0.6262.1KGoogle 发布 2026-⁠04 价格 $0.15 / $0.6 长度 262.1K
4GPT-4.1OpenAI评价 27.81347排名第 83〜⁠150 名$2$81.05MOpenAI 发布 2025-⁠04 价格 $2 / $8 长度 1.05M
5o3OpenAI评价 27.61424排名第 22〜⁠95 名$2$8200KOpenAI 发布 2025-⁠04 价格 $2 / $8 长度 200K
6Llama 3.3 Swallow 70B (instruct, v0.4)Swallow (東京科学大学)评价 27.5——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
7〜8GPT-5.4OpenAI评价 27.21480排名第 2〜⁠50 名$2.5$151.05MOpenAI 发布 2026-⁠03 价格 $2.5 / $15 长度 1.05M
7〜8GPT-5OpenAI评价 27.21431排名第 17〜⁠93 名$1.25$10400KOpenAI 发布 2025-⁠08 价格 $1.25 / $10 长度 400K
9GPT-5 miniOpenAI评价 26.71364排名第 63〜⁠146 名$0.25$2400KOpenAI 发布 2025-⁠08 价格 $0.25 / $2 长度 400K
10GPT-OSS-Swallow-120B-SFT-v0.1Swallow (東京科学大学)评价 26.4——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
11〜12GPT-OSS-Swallow-120B-RL-v0.1Swallow (東京科学大学)评价 26.3——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
11〜12Qwen3.5 122B A10B⁠Alibaba评价 26.31361排名第 60〜⁠154 名$0.4$3.2262.1KAlibaba 发布 2026-⁠02 价格 $0.4 / $3.2 长度 262.1K
13GPT-OSS 120B⁠OpenAI评价 26.21325排名第 95〜⁠166 名——128KOpenAI 发布 2025-⁠08 价格 — 长度 128K
14Gemma 4 E4BGoogle评价 26.1———131.1K——Google 发布 — 价格 — 长度 131.1K
15Qwen3 235B A22B (instruct)⁠Alibaba评价 25.81392排名第 44〜⁠119 名——128KAlibaba 发布 2025-⁠07 价格 — 长度 128K
16Gemma 4 E2BGoogle评价 25.6———131.1K——Google 发布 — 价格 — 长度 131.1K
17Qwen3 235B A22B (thinking)⁠Alibaba评价 25.51376排名第 49〜⁠142 名——262.1KAlibaba 发布 2025-⁠07 价格 — 长度 262.1K
18Qwen3.5 27B⁠Alibaba评价 25.21339排名第 71〜⁠166 名$0.3$2.4262.1KAlibaba 发布 2026-⁠02 价格 $0.3 / $2.4 长度 262.1K
19〜20Gemma 3 27B⁠Google评价 25.01308排名第 117〜⁠173 名——128KGoogle 发布 2025-⁠03 价格 — 长度 128K
19〜20Qwen3.5 35B A3B⁠Alibaba评价 25.01315排名第 93〜⁠183 名$0.25$2262.1KAlibaba 发布 2026-⁠02 价格 $0.25 / $2 长度 262.1K
21Llama 3.1 Swallow 8B (instruct, v0.5)Swallow (東京科学大学)评价 24.9——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
22GPT-OSS-Swallow-20B-RL-v0.1Swallow (東京科学大学)评价 24.8——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
23〜24Qwen3-Swallow-32B-RL-v0.2Swallow (東京科学大学)评价 24.7——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
23〜24Qwen3-Swallow-32B-SFT-v0.2Swallow (東京科学大学)评价 24.7——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
25GPT-OSS-Swallow-20B-SFT-v0.1Swallow (東京科学大学)评价 24.6——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
26〜27ELYZA-Shortcut-1.0-Qwen-32BELYZA评价 24.5——————ELYZA 发布 — 价格 — 长度 —
26〜27Llama 3.3 70B (instruct)⁠Meta评价 24.51214排名第 176〜⁠224 名——131.1KMeta 发布 2024-⁠12 价格 — 长度 131.1K
28〜29NVIDIA Nemotron 3 Super 120B A12B⁠NVIDIA评价 24.4———262.1KNVIDIA 发布 2026-⁠03 价格 — 长度 262.1K
28〜29Qwen3-Swallow-32B-CPT-v0.2Swallow (東京科学大学)评价 24.4——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
30o3-miniOpenAI评价 24.31315排名第 101〜⁠175 名$1.1$4.4200KOpenAI 发布 2025-⁠01 价格 $1.1 / $4.4 长度 200K
31〜34Qwen3 Next 80B A3B (instruct)⁠Alibaba评价 24.01369排名第 53〜⁠146 名$0.5$2129KAlibaba 发布 2025-⁠09 价格 $0.5 / $2 长度 129K
31〜34Qwen3 Next 80B A3B⁠Alibaba评价 24.01293排名第 112〜⁠202 名$0.5$6131.1KAlibaba 发布 2025-⁠09 价格 $0.5 / $6 长度 131.1K
31〜34Qwen3-Swallow-30B-A3B-CPT-v0.2Swallow (東京科学大学)评价 24.0——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
31〜34Qwen3-Swallow-30B-A3B-SFT-v0.2Swallow (東京科学大学)评价 24.0——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
35Qwen3-Swallow-30B-A3B-RL-v0.2Swallow (東京科学大学)评价 23.9——————Swallow (東京科学大学) 发布 — 价格 — 长度 —
36ABEJA-QwQ32b-Reasoning-Japanese-v1.0ABEJA评价 23.8——————ABEJA 发布 — 价格 — 长度 —
37〜38ELYZA-Thinking-1.0-Qwen-32BELYZA评价 23.7——————ELYZA 发布 — 价格 — 长度 —
37〜38Llama 4 Scout⁠Meta评价 23.71259排名第 149〜⁠209 名——128KMeta 发布 2025-⁠04 价格 — 长度 128K
39LLM-jp-4 32B A3BLLM-jp评价 23.5——————LLM-jp 发布 — 价格 — 长度 —
40GPT-OSS 20B⁠OpenAI评价 23.41256排名第 140〜⁠216 名——131KOpenAI 发布 2025-⁠08 价格 — 长度 131K
如何阅读本页
  • 数值是把与参考译文的接近程度换算成满分 100 的分数,排名靠前的模型也只有 30 分左右。不到 1 分的差距并不是明确的差距。
  • 人类评价是由人比较 2 个回答并作出选择的结果得出的分数 (越高越好)。
  • 支持一栏的图标从左起依次为:能使用工具 / 能读图片 / 能以固定格式 (JSON) 回答 (浅色标记为不支持或不明)。
  • 开放权重是指模型的内容 (权重) 已经公开、在自己的电脑或服务器上也能运行的模型。没有开放权重标记的模型,一般通过开发方的服务 (应用或 API) 使用 (也有没有权重信息的模型)。
  • 模型名称旁的 ChatGPT 等,是该开发方面向大众提供的服务名称。该模型能否在那个服务中选用,请在服务一方确认。

数据:Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT),更新于 2026-⁠10-⁠24,数据来源