Saltar al contenido principal

Resultados en tareas

Traducción del inglés al japonés (WMT20enja)

Tarea en la que el modelo traduce frases de noticias del inglés al japonés y se mide lo cerca que quedan de las traducciones de referencia hechas por personas.

Cómo leer esta tabla

  • Cuanto más arriba, mejor valoración; la diferencia entre modelos que aparecen con un intervalo como «1–2» está dentro del margen de error.
  • La valoración es la puntuación obtenida al resolver las preguntas comunes.
  • No hace falta preocuparse por diferencias pequeñas.
  • El precio es una referencia por cada millón de tokens: primero lo que se le da a leer y después lo que se le pide escribir.
  • La longitud es la cantidad de texto que se le puede dar a leer de una vez (tokens).
PuestoModeloDesarrolladorPuntuaciónEscala de Puntuación: 20–30Fecha de evaluaciónJaponés
(valoración humana)
Entrada $
/1M
Salida $
/1M
ContextoAdmitePesosPublicaciónPrecio y características
1.ºGemma 4 31B⁠GoogleValoración 28.5———262.1KGoogle Publicación 2026-⁠04 Precio — Longitud 262.1K
2.ºGPT-4o (2024-⁠08)OpenAIValoración 28.21292Puesto 124–185$2.5$10128KOpenAI Publicación 2024-⁠08 Precio $2.5 / $10 Longitud 128K
3.ºGemma 4 26B A4B⁠GoogleValoración 28.0—$0.15$0.6262.1KGoogle Publicación 2026-⁠04 Precio $0.15 / $0.6 Longitud 262.1K
4.ºGPT-4.1OpenAIValoración 27.81347Puesto 83–150$2$81.05MOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 1.05M
5.ºo3OpenAIValoración 27.61424Puesto 22–95$2$8200KOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 200K
6.ºLlama 3.3 Swallow 70B (instruct, v0.4)Swallow (東京科学大学)Valoración 27.5——————Swallow (東京科学大学) Publicación — Precio — Longitud —
7–8.ºGPT-5.4OpenAIValoración 27.21480Puesto 2–50$2.5$151.05MOpenAI Publicación 2026-⁠03 Precio $2.5 / $15 Longitud 1.05M
7–8.ºGPT-5OpenAIValoración 27.21431Puesto 17–93$1.25$10400KOpenAI Publicación 2025-⁠08 Precio $1.25 / $10 Longitud 400K
9.ºGPT-5 miniOpenAIValoración 26.71364Puesto 63–146$0.25$2400KOpenAI Publicación 2025-⁠08 Precio $0.25 / $2 Longitud 400K
10.ºGPT-OSS-Swallow-120B-SFT-v0.1Swallow (東京科学大学)Valoración 26.4——————Swallow (東京科学大学) Publicación — Precio — Longitud —
11–12.ºGPT-OSS-Swallow-120B-RL-v0.1Swallow (東京科学大学)Valoración 26.3——————Swallow (東京科学大学) Publicación — Precio — Longitud —
11–12.ºQwen3.5 122B A10B⁠AlibabaValoración 26.31361Puesto 60–154$0.4$3.2262.1KAlibaba Publicación 2026-⁠02 Precio $0.4 / $3.2 Longitud 262.1K
13.ºGPT-OSS 120B⁠OpenAIValoración 26.21325Puesto 95–166——128KOpenAI Publicación 2025-⁠08 Precio — Longitud 128K
14.ºGemma 4 E4BGoogleValoración 26.1———131.1K——Google Publicación — Precio — Longitud 131.1K
15.ºQwen3 235B A22B (instruct)⁠AlibabaValoración 25.81392Puesto 44–119——128KAlibaba Publicación 2025-⁠07 Precio — Longitud 128K
16.ºGemma 4 E2BGoogleValoración 25.6———131.1K——Google Publicación — Precio — Longitud 131.1K
17.ºQwen3 235B A22B (thinking)⁠AlibabaValoración 25.51376Puesto 49–142——262.1KAlibaba Publicación 2025-⁠07 Precio — Longitud 262.1K
18.ºQwen3.5 27B⁠AlibabaValoración 25.21339Puesto 71–166$0.3$2.4262.1KAlibaba Publicación 2026-⁠02 Precio $0.3 / $2.4 Longitud 262.1K
19–20.ºGemma 3 27B⁠GoogleValoración 25.01308Puesto 117–173——128KGoogle Publicación 2025-⁠03 Precio — Longitud 128K
19–20.ºQwen3.5 35B A3B⁠AlibabaValoración 25.01315Puesto 93–183$0.25$2262.1KAlibaba Publicación 2026-⁠02 Precio $0.25 / $2 Longitud 262.1K
21.ºLlama 3.1 Swallow 8B (instruct, v0.5)Swallow (東京科学大学)Valoración 24.9——————Swallow (東京科学大学) Publicación — Precio — Longitud —
22.ºGPT-OSS-Swallow-20B-RL-v0.1Swallow (東京科学大学)Valoración 24.8——————Swallow (東京科学大学) Publicación — Precio — Longitud —
23–24.ºQwen3-Swallow-32B-RL-v0.2Swallow (東京科学大学)Valoración 24.7——————Swallow (東京科学大学) Publicación — Precio — Longitud —
23–24.ºQwen3-Swallow-32B-SFT-v0.2Swallow (東京科学大学)Valoración 24.7——————Swallow (東京科学大学) Publicación — Precio — Longitud —
25.ºGPT-OSS-Swallow-20B-SFT-v0.1Swallow (東京科学大学)Valoración 24.6——————Swallow (東京科学大学) Publicación — Precio — Longitud —
26–27.ºELYZA-Shortcut-1.0-Qwen-32BELYZAValoración 24.5——————ELYZA Publicación — Precio — Longitud —
26–27.ºLlama 3.3 70B (instruct)⁠MetaValoración 24.51214Puesto 176–224——131.1KMeta Publicación 2024-⁠12 Precio — Longitud 131.1K
28–29.ºNVIDIA Nemotron 3 Super 120B A12B⁠NVIDIAValoración 24.4———262.1KNVIDIA Publicación 2026-⁠03 Precio — Longitud 262.1K
28–29.ºQwen3-Swallow-32B-CPT-v0.2Swallow (東京科学大学)Valoración 24.4——————Swallow (東京科学大学) Publicación — Precio — Longitud —
30.ºo3-miniOpenAIValoración 24.31315Puesto 101–175$1.1$4.4200KOpenAI Publicación 2025-⁠01 Precio $1.1 / $4.4 Longitud 200K
31–34.ºQwen3 Next 80B A3B (instruct)⁠AlibabaValoración 24.01369Puesto 53–146$0.5$2129KAlibaba Publicación 2025-⁠09 Precio $0.5 / $2 Longitud 129K
31–34.ºQwen3 Next 80B A3B⁠AlibabaValoración 24.01293Puesto 112–202$0.5$6131.1KAlibaba Publicación 2025-⁠09 Precio $0.5 / $6 Longitud 131.1K
31–34.ºQwen3-Swallow-30B-A3B-CPT-v0.2Swallow (東京科学大学)Valoración 24.0——————Swallow (東京科学大学) Publicación — Precio — Longitud —
31–34.ºQwen3-Swallow-30B-A3B-SFT-v0.2Swallow (東京科学大学)Valoración 24.0——————Swallow (東京科学大学) Publicación — Precio — Longitud —
35.ºQwen3-Swallow-30B-A3B-RL-v0.2Swallow (東京科学大学)Valoración 23.9——————Swallow (東京科学大学) Publicación — Precio — Longitud —
36.ºABEJA-QwQ32b-Reasoning-Japanese-v1.0ABEJAValoración 23.8——————ABEJA Publicación — Precio — Longitud —
37–38.ºELYZA-Thinking-1.0-Qwen-32BELYZAValoración 23.7——————ELYZA Publicación — Precio — Longitud —
37–38.ºLlama 4 Scout⁠MetaValoración 23.71259Puesto 149–209——128KMeta Publicación 2025-⁠04 Precio — Longitud 128K
39.ºLLM-jp-4 32B A3BLLM-jpValoración 23.5——————LLM-jp Publicación — Precio — Longitud —
40.ºGPT-OSS 20B⁠OpenAIValoración 23.41256Puesto 140–216——131KOpenAI Publicación 2025-⁠08 Precio — Longitud 131K
Cómo leer esta página
  • El valor es la cercanía a las traducciones de referencia convertida a una escala de 100 puntos, y aun los mejores modelos rondan los 30 puntos. Las diferencias de menos de 1 punto no son diferencias claras.
  • La valoración humana es una puntuación que sale de personas que comparan 2 respuestas y eligen una (cuanto más alta, mejor).
  • Los iconos de la columna Admite son, de izquierda a derecha: puede usar herramientas / puede leer imágenes / puede responder con un formato fijo (JSON) (una marca tenue significa que no lo admite o que se desconoce).
  • Un modelo de pesos abiertos es aquel cuyo contenido (los pesos) se ha publicado y que también puedes ejecutar en tu propio ordenador o servidor. Los modelos sin la marca de pesos abiertos se usan normalmente a través del servicio del desarrollador (aplicación o API) (algunos modelos no tienen información sobre sus pesos).
  • ChatGPT y los demás nombres junto al nombre del modelo son los servicios que ese desarrollador ofrece al público. Comprueba en el propio servicio si ese modelo se puede elegir allí.

Datos: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT), actualizado el 2026-⁠10-⁠24, Fuentes de datos