Saltar al contenido principal

Resultados en tareas

Preguntas de opción múltiple de nivel experto en biología, química y física (versión en inglés medida en las mismas condiciones que la versión en japonés, GPQA)

Tarea que reúne preguntas de opción múltiple en inglés escritas por expertos en biología, química y física, que la mayoría de las personas ajenas al campo responde mal.

Cómo leer esta tabla

  • Cuanto más arriba, mejor valoración; la diferencia entre modelos que aparecen con un intervalo como «1–2» está dentro del margen de error.
  • La valoración es la proporción (%) de preguntas comunes que se resolvieron.
  • Una diferencia de 3 equivale a 3 preguntas de cada 100.
  • El precio es una referencia por cada millón de tokens: primero lo que se le da a leer y después lo que se le pide escribir.
  • La longitud es la cantidad de texto que se le puede dar a leer de una vez (tokens).
PuestoModeloDesarrolladorTasa de acierto
(%)
Escala de Tasa de acierto: 40–100
Fecha de evaluaciónEntrada $
/1M
Salida $
/1M
ContextoAdmitePesosPublicaciónPrecio y características
1.ºGPT-5.4OpenAIValoración 88.8$2.5$151.05MOpenAI Publicación 2026-⁠03 Precio $2.5 / $15 Longitud 1.05M
2.ºQwen3.5 27B⁠AlibabaValoración 86.6$0.3$2.4262.1KAlibaba Publicación 2026-⁠02 Precio $0.3 / $2.4 Longitud 262.1K
3.ºQwen3.5 122B A10B⁠AlibabaValoración 86.2$0.4$3.2262.1KAlibaba Publicación 2026-⁠02 Precio $0.4 / $3.2 Longitud 262.1K
4.ºGemma 4 31B⁠GoogleValoración 85.6——262.1KGoogle Publicación 2026-⁠04 Precio — Longitud 262.1K
5–6.ºGPT-5OpenAIValoración 84.0$1.25$10400KOpenAI Publicación 2025-⁠08 Precio $1.25 / $10 Longitud 400K
5–6.ºQwen3.5 35B A3B⁠AlibabaValoración 84.0$0.25$2262.1KAlibaba Publicación 2026-⁠02 Precio $0.25 / $2 Longitud 262.1K
7.ºQwen3.5 9B⁠AlibabaValoración 82.7——262KAlibaba Publicación 2026-⁠02 Precio — Longitud 262K
8.ºo3OpenAIValoración 81.9$2$8200KOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 200K
9.ºNVIDIA Nemotron 3 Super 120B A12B⁠NVIDIAValoración 81.8——262.1KNVIDIA Publicación 2026-⁠03 Precio — Longitud 262.1K
10.ºQwen3 235B A22B (thinking)⁠AlibabaValoración 79.4——262.1KAlibaba Publicación 2025-⁠07 Precio — Longitud 262.1K
11.ºGemma 4 26B A4B⁠GoogleValoración 78.8$0.15$0.6262.1KGoogle Publicación 2026-⁠04 Precio $0.15 / $0.6 Longitud 262.1K
12.ºQwen3.5 4B⁠AlibabaValoración 76.5——262.1KAlibaba Publicación 2026-⁠02 Precio — Longitud 262.1K
13.ºQwen3 Next 80B A3B⁠AlibabaValoración 76.3$0.5$6131.1KAlibaba Publicación 2025-⁠09 Precio $0.5 / $6 Longitud 131.1K
14.ºQwen3 Next 80B A3B (instruct)⁠AlibabaValoración 75.3$0.5$2129KAlibaba Publicación 2025-⁠09 Precio $0.5 / $2 Longitud 129K
15.ºo3-miniOpenAIValoración 73.4$1.1$4.4200KOpenAI Publicación 2025-⁠01 Precio $1.1 / $4.4 Longitud 200K
16.ºGPT-OSS 120B⁠OpenAIValoración 70.6——128KOpenAI Publicación 2025-⁠08 Precio — Longitud 128K
17.ºGPT-OSS-Swallow-120B-RL-v0.1Swallow (東京科学大学)Valoración 70.5—————Swallow (東京科学大学) Publicación — Precio — Longitud —
18–19.ºGPT-5 miniOpenAIValoración 70.1$0.25$2400KOpenAI Publicación 2025-⁠08 Precio $0.25 / $2 Longitud 400K
18–19.ºQwen3-Swallow-32B-RL-v0.2Swallow (東京科学大学)Valoración 70.1—————Swallow (東京科学大学) Publicación — Precio — Longitud —
20.ºGPT-OSS-Swallow-120B-SFT-v0.1Swallow (東京科学大学)Valoración 68.1—————Swallow (東京科学大学) Publicación — Precio — Longitud —
21.ºGPT-OSS-Swallow-20B-RL-v0.1Swallow (東京科学大学)Valoración 67.6—————Swallow (東京科学大学) Publicación — Precio — Longitud —
22.ºGPT-4.1OpenAIValoración 66.7$2$81.05MOpenAI Publicación 2025-⁠04 Precio $2 / $8 Longitud 1.05M
23.ºGPT-OSS 20B⁠OpenAIValoración 65.4——131KOpenAI Publicación 2025-⁠08 Precio — Longitud 131K
24.ºGPT-OSS-Swallow-20B-SFT-v0.1Swallow (東京科学大学)Valoración 64.8—————Swallow (東京科学大学) Publicación — Precio — Longitud —
25.ºQwen3 30B A3B⁠AlibabaValoración 64.5——128KAlibaba Publicación 2025-⁠04 Precio — Longitud 128K
26–27.ºQwen3 32B⁠AlibabaValoración 63.8$0.7$2.8131.1KAlibaba Publicación 2025-⁠04 Precio $0.7 / $2.8 Longitud 131.1K
26–27.ºQwen3-Swallow-32B-SFT-v0.2Swallow (東京科学大学)Valoración 63.8—————Swallow (東京科学大学) Publicación — Precio — Longitud —
28.ºQwen3-Swallow-32B-CPT-v0.2Swallow (東京科学大学)Valoración 62.1—————Swallow (東京科学大学) Publicación — Precio — Longitud —
29.ºDeepSeek-R1-Distill-Qwen-32B-JapaneseCyberAgentValoración 61.9—————CyberAgent Publicación — Precio — Longitud —
30–31.ºABEJA-QwQ32b-Reasoning-Japanese-v1.0ABEJAValoración 61.5—————ABEJA Publicación — Precio — Longitud —
30–31.ºQwen3-Swallow-30B-A3B-RL-v0.2Swallow (東京科学大学)Valoración 61.5—————Swallow (東京科学大学) Publicación — Precio — Longitud —
32–33.ºQwen3 14B⁠AlibabaValoración 61.0$0.35$1.4131.1KAlibaba Publicación 2025-⁠04 Precio $0.35 / $1.4 Longitud 131.1K
32–33.ºQwQ Bakeneko 32BrinnaValoración 61.0—————rinna Publicación — Precio — Longitud —
34.ºLlama 4 Scout⁠MetaValoración 60.6——128KMeta Publicación 2025-⁠04 Precio — Longitud 128K
35.ºQwen3-Swallow-30B-A3B-SFT-v0.2Swallow (東京科学大学)Valoración 60.5—————Swallow (東京科学大学) Publicación — Precio — Longitud —
36.ºOLMo 3 32B Think⁠Ai2Valoración 60.1————Ai2 Publicación — Precio — Longitud —
37.ºQwen3 235B A22B (instruct)⁠AlibabaValoración 58.6——128KAlibaba Publicación 2025-⁠07 Precio — Longitud 128K
38–39.ºQwen3 8B⁠AlibabaValoración 58.3$0.18$0.7131.1KAlibaba Publicación 2025-⁠04 Precio $0.18 / $0.7 Longitud 131.1K
38–39.ºQwen3-Swallow-8B-RL-v0.2Swallow (東京科学大学)Valoración 58.3—————Swallow (東京科学大学) Publicación — Precio — Longitud —
40.ºQwen3-Swallow-30B-A3B-CPT-v0.2Swallow (東京科学大学)Valoración 58.0—————Swallow (東京科学大学) Publicación — Precio — Longitud —
Cómo leer esta página
  • El valor es la tasa de acierto.
  • La tasa de acierto es la proporción de preguntas resueltas. Una diferencia de 1 punto equivale a 1 pregunta de cada 100.
  • Los iconos de la columna Admite son, de izquierda a derecha: puede usar herramientas / puede leer imágenes / puede responder con un formato fijo (JSON) (una marca tenue significa que no lo admite o que se desconoce).
  • Un modelo de pesos abiertos es aquel cuyo contenido (los pesos) se ha publicado y que también puedes ejecutar en tu propio ordenador o servidor. Los modelos sin la marca de pesos abiertos se usan normalmente a través del servicio del desarrollador (aplicación o API) (algunos modelos no tienen información sobre sus pesos).
  • ChatGPT y los demás nombres junto al nombre del modelo son los servicios que ese desarrollador ofrece al público. Comprueba en el propio servicio si ese modelo se puede elegir allí.

Datos: Arena / Epoch AI / Swallow LLM team (CC BY 4.0) / Models.dev (MIT), actualizado el 2026-⁠10-⁠24, Fuentes de datos