Agent Arena classe Hy4 de Tencent au 14e rang général, avec un coût par tâche inférieur d’environ 62 % à celui de Kimi K3.1 Pro

Selon Arena, Hy4 de Tencent s’est hissé au 14e rang général de son Agent Arena, qui évalue les modèles à partir de véritables sessions d’agents menées par sa communauté d’utilisateurs. Arena indique que ce résultat s’appuie sur plus de 8 500 sessions de longue durée et une amélioration nette de 4,7 %, et que Hy4 rejoint la frontière de Pareto d’Agent Arena en matière de score et de coût.

Selon Arena :

• Coût : Hy4 coûte 0,55 $ par tâche, contre 1,46 $ pour Kimi K3.1 Pro (Max), soit environ 62 % de moins, pour des scores qui ne diffèrent que d’un point de pourcentage.
• Modèles ouverts : Hy4 est pour l’instant propriétaire ; une fois ses poids publiés, Arena estime qu’il serait à égalité avec Kimi K3.1 Pro au 1er rang des modèles ouverts.
• Par rapport à l’aperçu : le résultat est supérieur de 3,6 points de pourcentage à celui de l’aperçu de Hy4, qui était classé 25e avec +1,1 %.
• Indicateurs : Confirmed Success, 11e (+8,7 %, contre 16e) ; Praise vs Complaint, 18e (+3,8 %, contre 24e) ; Steerability, 14e (+5,7 %, contre 27e) ; Bash Reliability, 20e (+6,2 %, contre 41e).

Il s’agit des chiffres d’Arena, calculés à partir des sessions de ses propres utilisateurs.