Artificial Analysis: Qwen4 Max scoort 43 op de Intelligence Index, 3 punten achter Kimi K3.1 Pro
Volgens Artificial Analysis scoort Qwen4 Max, bij een redeneerniveau van xhigh, 43 op de Intelligence Index: 9 punten hoger dan Qwen3.8 Max (34) en 3 punten lager dan Kimi K3.1 Pro (46).
- Verbeteringen: het model presteert beter op alle evaluaties in de index. HLE-Diamond stijgt van 24% naar 45%, en ook AA-Omniscience, AutomationBench-AA, CritPt v2, Terminal-Bench-Science en Terminal-Bench 4.0 stijgen.
- Kosten: $3.27 per taak op de Intelligence Index, ongeveer 3 keer goedkoper dan Qwen3.8 Max ($10.02) en ongeveer 11% goedkoper dan Kimi K3.1 Pro ($3.68). Het model gebruikt ongeveer 105k outputtokens per taak, 39% minder dan Qwen3.8 Max, maar meer dan Kimi K3.1 Pro (ongeveer 72k).
- Waar het achterblijft: Terminal-Bench 4.0 op 48%, tegenover 67% voor Kimi K3.1 Pro; FrontierCode 2.0 op 26%, gelijk aan Kimi K3.1 Pro en achter Tencent Hy4 (31%).
- Kenniswerk: 1686 Elo op AA-Briefcase, tegenover 1674 voor Kimi K3.1 Pro.
Artificial Analysis vermeldt een contextvenster van 1M tokens, tekst- en afbeeldingsinvoer en prijzen van $1.50/$4.50 per miljoen invoer-/outputtokens via Alibaba's eigen API.
Bronnen
Discussies
- So Qwen4 Max scores 43 on the AA intelligence index 😭X · 43 reacties
- Qwen 4 is not a good release.X · 126 reacties
Krijg nieuws als dit als pushmelding.
AI Tracker waarschuwt je zodra er iets verandert aan de tools die je gebruikt.