Saltar al contenido principal

Valores publicados por otras instituciones

Editar código en 6 lenguajes de programación (Aider polyglot)

Tarea en la que el modelo resuelve ejercicios difíciles de C++, Go, Java, JavaScript, Python y Rust reescribiendo archivos existentes.

Cómo leer esta tabla

  • Cuanto más arriba, mejor valoración; la diferencia entre modelos que aparecen con un intervalo como «1–2» está dentro del margen de error.
  • La valoración es el valor publicado por la institución que creó la tarea, entre otras.
  • Las condiciones de medición pueden variar según el modelo, así que no hace falta preocuparse por diferencias pequeñas.
  • El precio es una referencia por cada millón de tokens: primero lo que se le da a leer y después lo que se le pide escribir.
  • La longitud es la cantidad de texto que se le puede dar a leer de una vez (tokens).
PuestoModeloDesarrolladorTasa de éxito
(%)
Escala de Tasa de éxito: 0–100
Entrada $
/1M
Salida $
/1M
ContextoAdmitePesosPublicaciónPrecio y características
1.ºGPT-5OpenAIValoración 88.0$1.25$10400KOpenAI Publicación 2025-⁠08 Precio $1.25 / $10 Longitud 400K
2.ºo3-proOpenAIValoración 84.9——200KOpenAI Publicación 2025-⁠06 Precio — Longitud 200K
3.ºGemini 2.5 Pro (preview, 2025-⁠05)GoogleValoración 83.1——1.05MGoogle Publicación 2025-⁠05 Precio — Longitud 1.05M
4.ºo3OpenAIValoración 81.3$2$8200KOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 200K
5.ºGrok 4xAIValoración 79.6——256KxAI Publicación 2025-⁠07 Precio — Longitud 256K
6–7.ºDeepSeek-V3.2 (exp)⁠DeepSeekValoración 74.2——163.8KDeepSeek Publicación 2025-⁠09 Precio — Longitud 163.8K
6–7.ºDeepSeek-V3.2⁠DeepSeekValoración 74.2——128KDeepSeek Publicación 2025-⁠12 Precio — Longitud 128K
8–9.ºGemini 2.5 Pro (exp)GoogleValoración 72.9——1.05MGoogle Publicación 2025-⁠03 Precio — Longitud 1.05M
8–9.ºGemini 2.5 Pro (preview, 2025-⁠03)GoogleValoración 72.9——1.05MGoogle Publicación 2025-⁠03 Precio — Longitud 1.05M
10–11.ºClaude Opus 4AnthropicValoración 72.0——200KAnthropic Publicación 2025-⁠05 Precio — Longitud 200K
10–11.ºo4-miniOpenAIValoración 72.0$1.1$4.4200KOpenAI Publicación 2025-⁠04 Precio $1.1 / $4.4 Longitud 200K
12.ºDeepSeek-R1 (2025-⁠05)⁠DeepSeekValoración 71.4——131.1KDeepSeek Publicación 2025-⁠05 Precio — Longitud 131.1K
13.ºDeepSeek Chat (API)⁠DeepSeekValoración 70.2——1MDeepSeek Publicación 2025-⁠12 Precio — Longitud 1M
14.ºClaude 3.7 SonnetAnthropicValoración 64.9——200KAnthropic Publicación 2025-⁠02 Precio — Longitud 200K
15.ºo1OpenAIValoración 61.7$15$60128KOpenAI Publicación 2024-⁠12 Precio $15 / $60 Longitud 128K
16.ºClaude Sonnet 4AnthropicValoración 61.3——200KAnthropic Publicación 2025-⁠05 Precio — Longitud 200K
17.ºo3-miniOpenAIValoración 60.4$1.1$4.4200KOpenAI Publicación 2025-⁠01 Precio $1.1 / $4.4 Longitud 200K
18–19.ºQwen3 235B A22B⁠AlibabaValoración 59.6$0.7$2.8128KAlibaba Publicación 2025-⁠04 Precio $0.7 / $2.8 Longitud 128K
18–19.ºQwen3 235B A22B (instruct)⁠AlibabaValoración 59.6——128KAlibaba Publicación 2025-⁠07 Precio — Longitud 128K
20–21.ºKimi K2 (instruct)⁠MoonshotValoración 59.1——131.1KMoonshot Publicación 2025-⁠07 Precio — Longitud 131.1K
20–21.ºKimi K2 (instruct, 2025-⁠09)⁠MoonshotValoración 59.1——262.1KMoonshot Publicación 2025-⁠09 Precio — Longitud 262.1K
22.ºDeepSeek-R1⁠DeepSeekValoración 56.9——128KDeepSeek Publicación 2025-⁠01 Precio — Longitud 128K
23–24.ºDeepSeek-V3 (2025-⁠03)⁠DeepSeekValoración 55.1——163.8KDeepSeek Publicación 2025-⁠03 Precio — Longitud 163.8K
23–24.ºGemini 2.5 Flash (preview, 2025-⁠05)GoogleValoración 55.1——1.05MGoogle Publicación 2025-⁠05 Precio — Longitud 1.05M
25.ºGrok 3 (beta)xAIValoración 53.3———xAI Publicación 2025-⁠04 Precio — Longitud —
26.ºGPT-4.1OpenAIValoración 52.4$2$81.05MOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 1.05M
27.ºClaude 3.5 Sonnet (2024-⁠10)AnthropicValoración 51.6——200KAnthropic Publicación 2024-⁠10 Precio — Longitud 200K
28.ºGrok 3 Mini (beta)xAIValoración 49.3———xAI Publicación 2025-⁠04 Precio — Longitud —
29.ºDeepSeek-V3⁠DeepSeekValoración 48.4——128KDeepSeek Publicación 2024-⁠12 Precio — Longitud 128K
30.ºGemini 2.5 Flash (preview, 2025-⁠04)GoogleValoración 47.1——1.05MGoogle Publicación 2025-⁠04 Precio — Longitud 1.05M
31.ºChatGPT-4o (2025-⁠03-⁠27)OpenAIValoración 45.3———OpenAI Publicación 2025-⁠03 Precio — Longitud —
32.ºGPT-4.5 (preview)OpenAIValoración 44.9———OpenAI Publicación 2025-⁠02 Precio — Longitud —
33.ºGPT-OSS 120B⁠OpenAIValoración 41.8——128KOpenAI Publicación 2025-⁠08 Precio — Longitud 128K
34.ºQwen3 32B⁠AlibabaValoración 40.0$0.7$2.8131.1KAlibaba Publicación 2025-⁠04 Precio $0.7 / $2.8 Longitud 131.1K
35.ºGemini ExpGoogleValoración 38.2——2.1MGoogle Publicación 2024-⁠12 Precio — Longitud 2.1M
36.ºGemini 2.0 Pro (exp)GoogleValoración 35.6——2.1MGoogle Publicación 2025-⁠02 Precio — Longitud 2.1M
37.ºo1-miniOpenAIValoración 32.9——128KOpenAI Publicación 2024-⁠09 Precio — Longitud 128K
38.ºGPT-4.1 miniOpenAIValoración 32.4——1.05MOpenAI Publicación 2025-⁠04 Precio — Longitud 1.05M
39.ºClaude 3.5 HaikuAnthropicValoración 28.0——200KAnthropic Publicación 2024-⁠10 Precio — Longitud 200K
40.ºChatGPT-4o (2025-⁠01)OpenAIValoración 27.1———OpenAI Publicación 2025-⁠01 Precio — Longitud —

Evolución de la máxima tasa de éxito

2024-03-26Publicación2025-12-01
Cómo leer esta página
  • Puede intentar las pruebas hasta 2 veces, y el valor es la proporción de problemas que pasan. Reúne valores publicados por las instituciones que crearon las tareas, entre otras.
  • La tasa de éxito es la proporción de intentos que salieron bien. Una diferencia de 1 punto equivale a 1 intento de cada 100.
  • Los iconos de la columna Admite son, de izquierda a derecha: puede usar herramientas / puede leer imágenes / puede responder con un formato fijo (JSON) (una marca tenue significa que no lo admite o que se desconoce).
  • Un modelo de pesos abiertos es aquel cuyo contenido (los pesos) se ha publicado y que también puedes ejecutar en tu propio ordenador o servidor. Los modelos sin la marca de pesos abiertos se usan normalmente a través del servicio del desarrollador (aplicación o API) (algunos modelos no tienen información sobre sus pesos).
  • ChatGPT y los demás nombres junto al nombre del modelo son los servicios que ese desarrollador ofrece al público. Comprueba en el propio servicio si ese modelo se puede elegir allí.

Datos: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT), actualizado el 2026-⁠10-⁠24, Fuentes de datos