Artificial Analysis: Qwen4 Max uzyskuje 43 punkty w Intelligence Index, o 3 mniej niż Kimi K3.1 Pro
Według Artificial Analysis Qwen4 Max przy xhigh reasoning effort uzyskuje 43 punkty w Intelligence Index: o 9 punktów więcej niż Qwen3.8 Max (34) i o 3 mniej niż Kimi K3.1 Pro (46).
- Wyniki: model poprawia rezultat w każdej ewaluacji uwzględnionej w indeksie. Wynik HLE-Diamond rośnie z 24% do 45%; poprawiają się też wyniki AA-Omniscience, AutomationBench-AA, CritPt v2, Terminal-Bench-Science i Terminal-Bench 4.0.
- Koszt: 3,27 USD za zadanie w Intelligence Index — około 3 razy mniej niż w przypadku Qwen3.8 Max (10,02 USD) i około 11% mniej niż w przypadku Kimi K3.1 Pro (3,68 USD). Model zużywa około 105 tys. tokenów wyjściowych na zadanie, o 39% mniej niż Qwen3.8 Max, ale więcej niż Kimi K3.1 Pro (około 72 tys.).
- Słabsze wyniki: Terminal-Bench 4.0 — 48% wobec 67% w przypadku Kimi K3.1 Pro; FrontierCode 2.0 — 26%, tyle samo co Kimi K3.1 Pro i mniej niż Tencent Hy4 (31%).
- Praca z wiedzą: 1686 Elo w AA-Briefcase wobec 1674 w przypadku Kimi K3.1 Pro.
Artificial Analysis podaje okno kontekstowe o długości 1 mln tokenów, obsługę tekstu i obrazów oraz ceny 1,50/4,50 USD za milion tokenów wejściowych/wyjściowych w API Alibaba.
Źródła
Dyskusje
- So Qwen4 Max scores 43 on the AA intelligence index 😭X · 43 komentarze
- Qwen 4 is not a good release.X · 126 komentarzy
Otrzymuj takie wiadomości jako push.
AI Tracker powiadomi Cię, gdy coś zmieni się w narzędziach, których używasz.