Agent Arenaの総合ランキングでTencentのHy4が14位に。タスクあたりのコストはKimi K3.1 Proより約62%低い
Arenaによると、TencentのHy4がAgent Arenaで総合14位に入りました。Agent Arenaは、ユーザーコミュニティの実際のエージェント利用セッションをもとにモデルを評価します。Arenaによれば、この結果は8,500件を超える長期セッションに基づいており、純改善率は4.7%。Hy4はスコアとコストの関係を示すAgent Arenaのパレートフロンティアにも加わりました。
Arenaによると:
- コスト: Hy4のタスクあたりのコストは0.55ドルで、Kimi K3.1 Pro (Max)の1.46ドルと比べて約62%安く、スコアの差は1パーセントポイント以内です。
- オープンモデル: Hy4は現時点ではプロプライエタリですが、重みが公開されれば、オープンモデル部門でKimi K3.1 Proと並んで1位になるとArenaは述べています。
- プレビュー版との比較: Hy4のプレビュー版(+1.1%で25位)を3.6パーセントポイント上回りました。
- 各指標: Confirmed Successは11位(+8.7%、16位から上昇)、Praise vs Complaintは18位(+3.8%、24位から上昇)、Steerabilityは14位(+5.7%、27位から上昇)、Bash Reliabilityは20位(+6.2%、41位から上昇)。
これらは、Arenaのユーザーセッションに基づくArenaの数値です。
ソース
こんなニュースをプッシュで。
使っているツールに変化があると、AI Tracker がお知らせします。