Saltar al contenido principal

Resultados en tareas

Traducción del japonés al inglés (WMT20jaen)

Tarea en la que el modelo traduce frases de noticias del japonés al inglés y se mide lo cerca que quedan de las traducciones de referencia hechas por personas.

Cómo leer esta tabla

  • Cuanto más arriba, mejor valoración; la diferencia entre modelos que aparecen con un intervalo como «1–2» está dentro del margen de error.
  • La valoración es la puntuación obtenida al resolver las preguntas comunes.
  • No hace falta preocuparse por diferencias pequeñas.
  • El precio es una referencia por cada millón de tokens: primero lo que se le da a leer y después lo que se le pide escribir.
  • La longitud es la cantidad de texto que se le puede dar a leer de una vez (tokens).
PuestoModeloDesarrolladorPuntuaciónEscala de Puntuación: 20–30Fecha de evaluaciónJaponés
(valoración humana)
Entrada $
/1M
Salida $
/1M
ContextoAdmitePesosPublicaciónPrecio y características
1.ºGPT-4o (2024-⁠08)OpenAIValoración 26.51292Puesto 124–185$2.5$10128KOpenAI Publicación 2024-⁠08 Precio $2.5 / $10 Longitud 128K
2.ºGemma 4 26B A4B⁠GoogleValoración 26.1—$0.15$0.6262.1KGoogle Publicación 2026-⁠04 Precio $0.15 / $0.6 Longitud 262.1K
3–4.ºGemma 4 31B⁠GoogleValoración 26.0———262.1KGoogle Publicación 2026-⁠04 Precio — Longitud 262.1K
3–4.ºGPT-4.1OpenAIValoración 26.01347Puesto 83–150$2$81.05MOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 1.05M
5.ºLlama 3.3 Swallow 70B (instruct, v0.4)Swallow (東京科学大学)Valoración 25.1——————Swallow (東京科学大学) Publicación — Precio — Longitud —
6.ºGPT-5.4OpenAIValoración 24.91480Puesto 2–50$2.5$151.05MOpenAI Publicación 2026-⁠03 Precio $2.5 / $15 Longitud 1.05M
7.ºQwen3.5 122B A10B⁠AlibabaValoración 24.71361Puesto 60–154$0.4$3.2262.1KAlibaba Publicación 2026-⁠02 Precio $0.4 / $3.2 Longitud 262.1K
8.ºLlama 3.3 70B (instruct)⁠MetaValoración 24.61214Puesto 176–224——131.1KMeta Publicación 2024-⁠12 Precio — Longitud 131.1K
9.ºQwen3.5 27B⁠AlibabaValoración 24.11339Puesto 71–166$0.3$2.4262.1KAlibaba Publicación 2026-⁠02 Precio $0.3 / $2.4 Longitud 262.1K
10–11.ºGPT-5 miniOpenAIValoración 23.91364Puesto 63–146$0.25$2400KOpenAI Publicación 2025-⁠08 Precio $0.25 / $2 Longitud 400K
10–11.ºQwen3.5 35B A3B⁠AlibabaValoración 23.91315Puesto 93–183$0.25$2262.1KAlibaba Publicación 2026-⁠02 Precio $0.25 / $2 Longitud 262.1K
12.ºGemma 3 27B⁠GoogleValoración 23.81308Puesto 117–173——128KGoogle Publicación 2025-⁠03 Precio — Longitud 128K
13.ºGPT-5OpenAIValoración 23.61431Puesto 17–93$1.25$10400KOpenAI Publicación 2025-⁠08 Precio $1.25 / $10 Longitud 400K
14–15.ºLlama 4 Scout⁠MetaValoración 23.01259Puesto 149–209——128KMeta Publicación 2025-⁠04 Precio — Longitud 128K
14–15.ºQwen3 235B A22B (instruct)⁠AlibabaValoración 23.01392Puesto 44–119——128KAlibaba Publicación 2025-⁠07 Precio — Longitud 128K
16–17.ºGemma 3 12B⁠GoogleValoración 22.9———131KGoogle Publicación 2025-⁠03 Precio — Longitud 131K
16–17.ºQwen3 235B A22B (thinking)⁠AlibabaValoración 22.91376Puesto 49–142——262.1KAlibaba Publicación 2025-⁠07 Precio — Longitud 262.1K
18–21.ºELYZA-Shortcut-1.0-Qwen-32BELYZAValoración 22.8——————ELYZA Publicación — Precio — Longitud —
18–21.ºGemma 4 E4BGoogleValoración 22.8———131.1K——Google Publicación — Precio — Longitud 131.1K
18–21.ºQwen3 Next 80B A3B (instruct)⁠AlibabaValoración 22.81369Puesto 53–146$0.5$2129KAlibaba Publicación 2025-⁠09 Precio $0.5 / $2 Longitud 129K
18–21.ºQwen3-Swallow-32B-CPT-v0.2Swallow (東京科学大学)Valoración 22.8——————Swallow (東京科学大学) Publicación — Precio — Longitud —
22.ºGemma 4 E2BGoogleValoración 22.7———131.1K——Google Publicación — Precio — Longitud 131.1K
23–25.ºLlama 3.1 Swallow 8B (instruct, v0.5)Swallow (東京科学大学)Valoración 22.2——————Swallow (東京科学大学) Publicación — Precio — Longitud —
23–25.ºNVIDIA Nemotron 3 Super 120B A12B⁠NVIDIAValoración 22.2———262.1KNVIDIA Publicación 2026-⁠03 Precio — Longitud 262.1K
23–25.ºQwen3-Swallow-30B-A3B-CPT-v0.2Swallow (東京科学大学)Valoración 22.2——————Swallow (東京科学大学) Publicación — Precio — Longitud —
26.ºo3-miniOpenAIValoración 22.11315Puesto 101–175$1.1$4.4200KOpenAI Publicación 2025-⁠01 Precio $1.1 / $4.4 Longitud 200K
27.ºQwen3 14B⁠AlibabaValoración 21.9—$0.35$1.4131.1KAlibaba Publicación 2025-⁠04 Precio $0.35 / $1.4 Longitud 131.1K
28.ºGPT-OSS-Swallow-120B-RL-v0.1Swallow (東京科学大学)Valoración 21.8——————Swallow (東京科学大学) Publicación — Precio — Longitud —
29–32.ºELYZA-Thinking-1.0-Qwen-32BELYZAValoración 21.6——————ELYZA Publicación — Precio — Longitud —
29–32.ºGPT-OSS-Swallow-20B-SFT-v0.1Swallow (東京科学大学)Valoración 21.6——————Swallow (東京科学大学) Publicación — Precio — Longitud —
29–32.ºo3OpenAIValoración 21.61424Puesto 22–95$2$8200KOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 200K
29–32.ºQwen3 32B⁠AlibabaValoración 21.6—$0.7$2.8131.1KAlibaba Publicación 2025-⁠04 Precio $0.7 / $2.8 Longitud 131.1K
33–34.ºQwen3 30B A3B⁠AlibabaValoración 21.51254Puesto 150–211——128KAlibaba Publicación 2025-⁠04 Precio — Longitud 128K
33–34.ºQwen3-Swallow-32B-RL-v0.2Swallow (東京科学大学)Valoración 21.5——————Swallow (東京科学大学) Publicación — Precio — Longitud —
35.ºGPT-OSS-Swallow-120B-SFT-v0.1Swallow (東京科学大学)Valoración 21.3——————Swallow (東京科学大学) Publicación — Precio — Longitud —
36–38.ºABEJA-QwQ32b-Reasoning-Japanese-v1.0ABEJAValoración 21.0——————ABEJA Publicación — Precio — Longitud —
36–38.ºGPT-OSS-Swallow-20B-RL-v0.1Swallow (東京科学大学)Valoración 21.0——————Swallow (東京科学大学) Publicación — Precio — Longitud —
36–38.ºQwen3-Swallow-32B-SFT-v0.2Swallow (東京科学大学)Valoración 21.0——————Swallow (東京科学大学) Publicación — Precio — Longitud —
39–40.ºQwen3.5 9B⁠AlibabaValoración 20.9———262KAlibaba Publicación 2026-⁠02 Precio — Longitud 262K
39–40.ºQwen3-Swallow-30B-A3B-RL-v0.2Swallow (東京科学大学)Valoración 20.9——————Swallow (東京科学大学) Publicación — Precio — Longitud —
Cómo leer esta página
  • El valor es la cercanía a las traducciones de referencia convertida a una escala de 100 puntos, y aun los mejores modelos rondan los 25–30 puntos. Las diferencias de menos de 1 punto no son diferencias claras.
  • La valoración humana es una puntuación que sale de personas que comparan 2 respuestas y eligen una (cuanto más alta, mejor).
  • Los iconos de la columna Admite son, de izquierda a derecha: puede usar herramientas / puede leer imágenes / puede responder con un formato fijo (JSON) (una marca tenue significa que no lo admite o que se desconoce).
  • Un modelo de pesos abiertos es aquel cuyo contenido (los pesos) se ha publicado y que también puedes ejecutar en tu propio ordenador o servidor. Los modelos sin la marca de pesos abiertos se usan normalmente a través del servicio del desarrollador (aplicación o API) (algunos modelos no tienen información sobre sus pesos).
  • ChatGPT y los demás nombres junto al nombre del modelo son los servicios que ese desarrollador ofrece al público. Comprueba en el propio servicio si ese modelo se puede elegir allí.

Datos: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT), actualizado el 2026-⁠10-⁠24, Fuentes de datos