Agent Arena plasuje Tencent Hy4 na 14. miejscu w klasyfikacji ogólnej; koszt zadania jest o około 62% niższy niż w przypadku Kimi K3.1 Pro
Według Arena Tencent Hy4 zajął 14. miejsce w klasyfikacji ogólnej Agent Arena, która ocenia modele na podstawie rzeczywistych sesji agentowych społeczności użytkowników. Arena podaje, że wynik opiera się na ponad 8500 sesjach długiego horyzontu i oznacza poprawę netto o 4,7%, a Hy4 dołącza do granicy Pareto Agent Arena w zestawieniu wyniku względem kosztu.
Według Arena:
- Koszt: Hy4 kosztuje 0,55 USD za zadanie, a Kimi K3.1 Pro (Max) — 1,46 USD, czyli około 62% mniej, przy wynikach różniących się o nie więcej niż 1 punkt procentowy.
- Otwarte modele: Hy4 jest obecnie modelem własnościowym; po udostępnieniu wag, jak podaje Arena, zrównałby się z Kimi K3.1 Pro na 1. miejscu wśród otwartych modeli.
- W porównaniu z wersją preview: wynik jest o 3,6 punktu procentowego wyższy niż w przypadku wersji preview Hy4, która zajęła 25. miejsce z wynikiem +1,1%.
- Wskaźniki: Confirmed Success — 11. miejsce (+8,7%, awans z 16.); Praise vs Complaint — 18. miejsce (+3,8%, awans z 24.); Steerability — 14. miejsce (+5,7%, awans z 27.); Bash Reliability — 20. miejsce (+6,2%, awans z 41.).
To dane Arena, oparte na sesjach jej własnych użytkowników.
Źródła
Otrzymuj takie wiadomości jako push.
AI Tracker powiadomi Cię, gdy coś zmieni się w narzędziach, których używasz.