Artificial Analysis: Qwen4 Max ottiene 43 nell’Intelligence Index, 3 punti in meno di Kimi K3.1 Pro
Secondo Artificial Analysis, Qwen4 Max, con uno sforzo di ragionamento xhigh, ottiene 43 nell’Intelligence Index: 9 punti in più di Qwen3.8 Max (34) e 3 in meno di Kimi K3.1 Pro (46).
- Progressi: migliora in tutte le valutazioni dell’indice. HLE-Diamond sale dal 24% al 45%; aumentano anche AA-Omniscience, AutomationBench-AA, CritPt v2, Terminal-Bench-Science e Terminal-Bench 4.0.
- Costo: 3,27 $ per attività dell’Intelligence Index, circa 3 volte meno di Qwen3.8 Max (10,02 $) e circa l’11% meno di Kimi K3.1 Pro (3,68 $). Usa circa 105.000 token in output per attività, il 39% in meno di Qwen3.8 Max, ma più di Kimi K3.1 Pro (circa 72.000).
- Dove è indietro: Terminal-Bench 4.0 al 48%, contro il 67% di Kimi K3.1 Pro; FrontierCode 2.0 al 26%, alla pari con Kimi K3.1 Pro e dietro a Tencent Hy4 (31%).
- Lavoro della conoscenza: 1686 Elo su AA-Briefcase, contro i 1674 di Kimi K3.1 Pro.
Artificial Analysis indica una finestra di contesto da 1 milione di token, input di testo e immagini e tariffe di 1,50 $/4,50 $ per milione di token in input/output sull’API proprietaria di Alibaba.
Fonti
Discussioni
- So Qwen4 Max scores 43 on the AA intelligence index 😭X · 43 commenti
- Qwen 4 is not a good release.X · 126 commenti
Ricevi notizie come questa via push.
AI Tracker ti avvisa quando cambia qualcosa negli strumenti che usi.