Saltar al contenido principal

Benchmarks de LLM por área

Para cada área, qué mide / tipo / número de modelos incluidos.

Programación

BenchmarkQué mideTipoModelos
ProgramaciónValoración en preguntas de programaciónValoración humana387
LCB (Preguntas en inglés)Problemas recientes de programación competitivaResultados en tareas68
MirrorCodeTareas largas de rehacer programas completosResultados en tareas10
SWE-Bench verifiedCorregir errores reales en PythonResultados en tareas32
Aider polyglotEditar código en 6 lenguajes de programaciónValores publicados por otras instituciones55
Terminal BenchTrabajo en una terminalValores publicados por otras instituciones44

Matemáticas

BenchmarkQué mideTipoModelos
MatemáticasValoración en problemas de matemáticas con respuesta definidaValoración humana379
AIME (Preguntas en inglés)Problemas de un examen de matemáticas de Estados UnidosResultados en tareas68
FrontierMath 2025-02Problemas de matemáticas no publicados (versión antigua)Resultados en tareas71
FrontierMath Tier 4 2025-07Problemas de matemáticas de nivel de investigación (versión antigua)Resultados en tareas56
FrontierMath Tier 4 v2Problemas de matemáticas de nivel de investigaciónResultados en tareas71
FrontierMath Tiers 1-3 v2Problemas de matemáticas de nivel universitario avanzado a investigación inicialResultados en tareas88
MATH level 5Los problemas más difíciles de las competiciones de matemáticasResultados en tareas97
MATH500 (Preguntas en inglés)Una selección de problemas de competiciones de matemáticasResultados en tareas68
OTIS Mock AIME 2024-2025Problemas de competición matemática al estilo de AIMEResultados en tareas201
ProofBenchProblemas de demostración matemáticaValores publicados por otras instituciones81

Conocimiento y razonamiento

BenchmarkQué mideTipoModelos
Preguntas difícilesValoración en preguntas difícilesValoración humana392
Preguntas difíciles en inglésValoración en preguntas difíciles en inglésValoración humana390
Preguntas especializadasValoración en preguntas de nivel expertoValoración humana343
GPQA (Preguntas en inglés)Preguntas de opción múltiple de nivel experto en biología, química y física (versión en inglés medida en las mismas condiciones que la versión en japonés)Resultados en tareas68
GPQA diamondPreguntas de opción múltiple de nivel experto en biología, química y física (solo la parte que resolvieron los expertos)Resultados en tareas221
HellaSwag (Preguntas en inglés)Elegir cómo continúa una escena cotidianaResultados en tareas68
MMLU-Pro (Preguntas en inglés)Preguntas difíciles de opción múltiple de muchos camposResultados en tareas68
SimpleQA VerifiedResponder bien preguntas breves sobre hechosResultados en tareas83
ARC-AGI-2Acertijos abstractos de cuadrículasValores publicados por otras instituciones91
HLELas preguntas académicas más difícilesValores publicados por otras instituciones45

Escritura

BenchmarkQué mideTipoModelos
Conversaciones de varios turnosValoración en conversaciones de varios turnosValoración humana390
Escritura creativaValoración en peticiones de escritura creativaValoración humana390
Preguntas largasValoración en preguntas largasValoración humana370
Seguimiento de instruccionesValoración de si sigue instrucciones detalladasValoración humana392
Lech Mazur WritingCalificación de cuentosValores publicados por otras instituciones43

Agentes y documentos

BenchmarkQué mideTipoModelos
APEX-AgentsTareas de trabajo profesionalValores publicados por otras instituciones51
DeepResearch BenchResponder investigando en la webValores publicados por otras instituciones25
Fiction.LiveBenchComprensión de historias largasValores publicados por otras instituciones39
GDP.pdfComprensión de PDFValores publicados por otras instituciones39
OSWorld 2.0Manejar la pantalla de un ordenadorValores publicados por otras instituciones9
The Agent CompanyTrabajo simulado de una empresaValores publicados por otras instituciones14

Japonés y otros idiomas

BenchmarkQué mideTipoModelos
AlemánValoración en preguntas en alemánValoración humana291
ChinoValoración en preguntas en chinoValoración humana369
CoreanoValoración en preguntas en coreanoValoración humana261
EspañolValoración en preguntas en españolValoración humana279
FrancésValoración en preguntas en francésValoración humana279
Idiomas distintos del inglésValoración en preguntas en idiomas distintos del inglésValoración humana392
InglésValoración en preguntas en inglésValoración humana392
JaponésValoración en preguntas en japonésValoración humana262
PolacoValoración en preguntas en polacoValoración humana213
RusoValoración en preguntas en rusoValoración humana356
GPQA (Versión en japonés)Preguntas de opción múltiple de nivel experto en biología, química y física (versión en japonés)Resultados en tareas68
JamC-QAPreguntas de opción múltiple sobre cultura y vida en JapónResultados en tareas68
JHumanEvalEscribir código Python a partir de descripciones en japonésResultados en tareas68
MIFEvalJaSeguir instrucciones dadas en japonésResultados en tareas68
MIFEvalJa (Medido con las tareas en inglés)Seguir instrucciones dadas en japonésResultados en tareas68
MMLU-ProX (Versión en japonés)Preguntas difíciles de opción múltiple de muchos campos (versión en japonés)Resultados en tareas68
PolyMathJaHTProblemas difíciles de matemáticas (en japonés)Resultados en tareas68
WMT20enjaTraducción del inglés al japonésResultados en tareas68
WMT20jaenTraducción del japonés al inglésResultados en tareas68

Sectores

BenchmarkQué mideTipoModelos
Trabajo científicoValoración en preguntas de trabajo científicoValoración humana390
Trabajo cuantitativoValoración en preguntas de trabajo cuantitativoValoración humana376
Trabajo de redacción y ediciónValoración en preguntas de trabajo de redacción y ediciónValoración humana391
Trabajo en empresa y finanzasValoración en preguntas de trabajo de gestión y finanzasValoración humana385
Trabajo en entretenimiento y mediosValoración en preguntas de trabajo de entretenimiento y mediosValoración humana390
Trabajo en medicina y saludValoración en preguntas de trabajo sanitarioValoración humana363
Trabajo en software e ITValoración en preguntas de trabajo de software y TIValoración humana392
Trabajo jurídico y administrativoValoración en preguntas de trabajo jurídico y de administración públicaValoración humana365

Otros

BenchmarkQué mideTipoModelos
GeneralValoración global a partir de todos los votosValoración humana392
General (sin empates)Valoración sin los votos de empateValoración humana392
Chess PuzzlesElegir la mejor jugada en posiciones de ajedrezResultados en tareas85
EBR-benchMejorar jugando una y otra vezResultados en tareas27
Furniture AssemblyEncontrar errores en el montaje de mueblesResultados en tareas34
Mystery Game PuzzlesElegir la mejor jugada en un juego cuyo nombre no se revelaResultados en tareas79
SpireClimbGanar un juego de cartas en su ajuste más difícilResultados en tareas7
Cómo leer esta página
  • En el tipo, «Resultados en tareas» son resultados que la institución que reúne las evaluaciones midió por su cuenta en las mismas condiciones. «Valores publicados por otras instituciones» reúne valores publicados por las instituciones que crearon las tareas, entre otras. Dentro de cada área se ordenan por tipo y luego por nombre.

Datos: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT), actualizado el 2026-⁠10-⁠24, Fuentes de datos