Saltar al contenido principal

Resultados en tareas

Los problemas más difíciles de las competiciones de matemáticas (MATH level 5)

Tarea que usa solo los problemas del nivel de dificultad más alto del conjunto de datos MATH, que reúne problemas de competiciones de matemáticas como AMC 10, AMC 12 y AIME.

Cómo leer esta tabla

  • Cuanto más arriba, mejor valoración; la diferencia entre modelos que aparecen con un intervalo como «1–2» está dentro del margen de error.
  • La valoración es la proporción (%) de preguntas comunes que se resolvieron.
  • Una diferencia de 3 equivale a 3 preguntas de cada 100, y ± es lo que puede variar al volver a medir.
  • El precio es una referencia por cada millón de tokens: primero lo que se le da a leer y después lo que se le pide escribir.
  • La longitud es la cantidad de texto que se le puede dar a leer de una vez (tokens).

Margen de error del 1.º puesto

PuestoModeloDesarrolladorTasa de acierto
(%)
Escala de Tasa de acierto: 60–100
Fecha de evaluaciónEntrada $
/1M
Salida $
/1M
ContextoAdmitePesosPublicaciónPrecio y características
1–6.ºGPT-5OpenAIValoración 98.1 ±0.6$1.25$10400KOpenAI Publicación 2025-⁠08 Precio $1.25 / $10 Longitud 400K
1–6.ºGPT-5 miniOpenAIValoración 97.8 ±0.7$0.25$2400KOpenAI Publicación 2025-⁠08 Precio $0.25 / $2 Longitud 400K
1–6.ºo4-miniOpenAIValoración 97.8 ±0.7$1.1$4.4200KOpenAI Publicación 2025-⁠04 Precio $1.1 / $4.4 Longitud 200K
1–6.ºo3OpenAIValoración 97.8 ±0.7$2$8200KOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 200K
1–7.ºClaude Sonnet 4.5AnthropicValoración 97.7 ±0.8$3$15200KAnthropic Publicación 2025-⁠09 Precio $3 / $15 Longitud 200K
1–9.ºQwen3 Max (instruct)AlibabaValoración 97.1 ±0.8——258KAlibaba Publicación 2025-⁠09 Precio — Longitud 258K
5–11.ºDeepSeek-R1 (2025-⁠05)⁠DeepSeekValoración 96.6 ±0.8——131.1KDeepSeek Publicación 2025-⁠05 Precio — Longitud 131.1K
6–11.ºo3-miniOpenAIValoración 96.5 ±0.8$1.1$4.4200KOpenAI Publicación 2025-⁠01 Precio $1.1 / $4.4 Longitud 200K
6–12.ºClaude Haiku 4.5AnthropicValoración 96.4 ±1.0$1$5200KAnthropic Publicación 2025-⁠10 Precio $1 / $5 Longitud 200K
7–13.ºGemini 2.5 Pro (preview, 2025-⁠05)GoogleValoración 95.9 ±0.8——1.05MGoogle Publicación 2025-⁠05 Precio — Longitud 1.05M
7–13.ºGemini 2.5 Pro (preview, 2025-⁠03)GoogleValoración 95.6 ±0.9——1.05MGoogle Publicación 2025-⁠03 Precio — Longitud 1.05M
9–13.ºGPT-5 nanoOpenAIValoración 95.2 ±0.9$0.05$0.4400KOpenAI Publicación 2025-⁠08 Precio $0.05 / $0.4 Longitud 400K
10–14.ºo1OpenAIValoración 94.7 ±1.2$15$60128KOpenAI Publicación 2024-⁠12 Precio $15 / $60 Longitud 128K
13–15.ºDeepSeek-R1⁠DeepSeekValoración 93.1 ±1.4——128KDeepSeek Publicación 2025-⁠01 Precio — Longitud 128K
14–18.ºClaude 3.7 SonnetAnthropicValoración 91.2 ±1.5——200KAnthropic Publicación 2025-⁠02 Precio — Longitud 200K
15–19.ºGrok 3 Mini (beta)xAIValoración 90.9 ±1.5———xAI Publicación 2025-⁠04 Precio — Longitud —
15–19.ºDeepSeek-R1-Distill-Llama-70B⁠DeepSeekValoración 89.9 ±1.3——32.8KDeepSeek Publicación 2025-⁠01 Precio — Longitud 32.8K
15–20.ºo1-miniOpenAIValoración 89.2 ±1.3——128KOpenAI Publicación 2024-⁠09 Precio — Longitud 128K
16–21.ºGrok 3 (beta)xAIValoración 88.7 ±1.7———xAI Publicación 2025-⁠04 Precio — Longitud —
18–22.ºGPT-4.1 miniOpenAIValoración 87.3 ±1.4——1.05MOpenAI Publicación 2025-⁠04 Precio — Longitud 1.05M
19–22.ºDeepSeek-R1-Distill-Qwen-14B⁠DeepSeekValoración 87.1 ±1.5——32.8KDeepSeek Publicación 2025-⁠01 Precio — Longitud 32.8K
20–25.ºClaude Opus 4AnthropicValoración 85.0 ±1.9——200KAnthropic Publicación 2025-⁠05 Precio — Longitud 200K
22–27.ºClaude Sonnet 4AnthropicValoración 84.4 ±2.0——200KAnthropic Publicación 2025-⁠05 Precio — Longitud 200K
22–28.ºGemini 2.0 Pro (exp)GoogleValoración 83.5 ±2.0——2.1MGoogle Publicación 2025-⁠02 Precio — Longitud 2.1M
22–28.ºGPT-4.1OpenAIValoración 83.0 ±1.7$2$81.05MOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 1.05M
23–28.ºGemini 2.0 FlashGoogleValoración 82.2 ±1.7———Google Publicación 2025-⁠02 Precio — Longitud —
23–29.ºo1-previewOpenAIValoración 81.6 ±2.1———OpenAI Publicación 2024-⁠09 Precio — Longitud —
24–28.ºMistral Medium 3MistralValoración 81.6 ±1.8$0.4$2128KMistral Publicación 2025-⁠05 Precio $0.4 / $2 Longitud 128K
28–29.ºGPT-4.5 (preview)OpenAIValoración 78.6 ±2.2———OpenAI Publicación 2025-⁠02 Precio — Longitud —
30–32.ºDeepSeek-V3 (2025-⁠03)⁠DeepSeekValoración 75.5 ±1.7——163.8KDeepSeek Publicación 2025-⁠03 Precio — Longitud 163.8K
30–32.ºGemma 3 27B⁠GoogleValoración 74.0 ±2.2——128KGoogle Publicación 2025-⁠03 Precio — Longitud 128K
30–33.ºLlama 4 Maverick (FP8)⁠MetaValoración 73.0 ±2.1——1.05MMeta Publicación 2025-⁠04 Precio — Longitud 1.05M
32–35.ºGemini 1.5 Pro 002GoogleValoración 70.4 ±2.0———Google Publicación 2024-⁠09 Precio — Longitud —
33–36.ºGPT-4.1 nanoOpenAIValoración 70.0 ±2.0$0.1$0.41.05MOpenAI Publicación 2025-⁠04 Precio $0.1 / $0.4 Longitud 1.05M
33–36.ºQwen3 235B A22B⁠AlibabaValoración 68.9 ±1.9$0.7$2.8128KAlibaba Publicación 2025-⁠04 Precio $0.7 / $2.8 Longitud 128K
34–39.ºQwen MaxAlibabaValoración 67.2 ±2.2——128KAlibaba Publicación 2025-⁠01 Precio — Longitud 128K
36–42.ºQwen Plus (2025-⁠01)AlibabaValoración 65.3 ±2.2———Alibaba Publicación 2025-⁠01 Precio — Longitud —
36–42.ºPhi-4⁠MicrosoftValoración 64.9 ±2.1——128KMicrosoft Publicación 2024-⁠12 Precio — Longitud 128K
36–43.ºDeepSeek-V3⁠DeepSeekValoración 64.9 ±2.1——128KDeepSeek Publicación 2024-⁠12 Precio — Longitud 128K
37–43.ºGrok 2 (2024-⁠12)xAIValoración 63.5 ±2.6———xAI Publicación 2024-⁠12 Precio — Longitud —

Evolución de la máxima tasa de acierto

2023-06-13Publicación2025-10-15
Cómo leer esta página
  • Las respuestas deben seguir un formato fijo, y el valor es la tasa de acierto.
  • La tasa de acierto es la proporción de preguntas resueltas. Una diferencia de 1 punto equivale a 1 pregunta de cada 100.
  • Los iconos de la columna Admite son, de izquierda a derecha: puede usar herramientas / puede leer imágenes / puede responder con un formato fijo (JSON) (una marca tenue significa que no lo admite o que se desconoce).
  • Un modelo de pesos abiertos es aquel cuyo contenido (los pesos) se ha publicado y que también puedes ejecutar en tu propio ordenador o servidor. Los modelos sin la marca de pesos abiertos se usan normalmente a través del servicio del desarrollador (aplicación o API) (algunos modelos no tienen información sobre sus pesos).
  • ChatGPT y los demás nombres junto al nombre del modelo son los servicios que ese desarrollador ofrece al público. Comprueba en el propio servicio si ese modelo se puede elegir allí.

Datos: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT), actualizado el 2026-⁠10-⁠24, Fuentes de datos