Artificial Analysis: Qwen4 Max obtiene 43 en su Intelligence Index, 3 puntos por detrás de Kimi K3.1 Pro
Artificial Analysis afirma que Qwen4 Max, con un nivel de esfuerzo de razonamiento xhigh, obtiene 43 en su Intelligence Index: 9 puntos más que Qwen3.8 Max (34) y 3 menos que Kimi K3.1 Pro (46).
- Mejoras: supera sus resultados en todas las evaluaciones del índice. HLE-Diamond sube del 24% al 45%, y también mejoran AA-Omniscience, AutomationBench-AA, CritPt v2, Terminal-Bench-Science y Terminal-Bench 4.0.
- Costo: $3.27 por tarea de Intelligence Index, unas 3 veces menos que Qwen3.8 Max ($10.02) y aproximadamente un 11% menos que Kimi K3.1 Pro ($3.68). Usa unos 105.000 tokens de salida por tarea, un 39% menos que Qwen3.8 Max, aunque más que Kimi K3.1 Pro (unos 72.000).
- Dónde queda atrás: Terminal-Bench 4.0, con un 48%, frente al 67% de Kimi K3.1 Pro; FrontierCode 2.0, con un 26%, a la par de Kimi K3.1 Pro y por detrás de Tencent Hy4 (31%).
- Trabajo de conocimiento: 1686 Elo en AA-Briefcase, frente a los 1674 de Kimi K3.1 Pro.
Artificial Analysis indica una ventana de contexto de 1 millón de tokens, entrada de texto e imágenes, y precios de $1.50/$4.50 por millón de tokens de entrada/salida en la API propia de Alibaba.
Fuentes
Debates
- So Qwen4 Max scores 43 on the AA intelligence index 😭X · 43 comentarios
- Qwen 4 is not a good release.X · 126 comentarios
Recibe noticias como esta por push.
AI Tracker te avisa cuando algo cambia en las herramientas que usas.