Arena: Muse Ember dari Meta memimpin model efisien di Agent Arena dengan biaya 1,9¢ per tugas
Menurut Arena, Muse Ember (Max) dari Meta kini memimpin di antara model efisien yang dirancang untuk pekerjaan nyata, mengungguli GPT-6 Luna (Max) dari OpenAI dan Claude Haiku 5.5 (High) dari Anthropic dalam semua metrik di Agent Arena mereka:
| Model | Peningkatan bersih | Biaya per tugas | Waktu per tugas | | --- | --- | --- | --- | | Muse Ember (Max) | +2.3% | 1.9¢ | 27 s | | GPT-6 Luna (Max) | +1.4% | 7.0¢ | 5.8 min | | Claude Haiku 5.5 (High) | +0.4% | 6.9¢ | 1.9 min |
Arena menyebut Ember sekitar 13x lebih cepat daripada Luna dan biayanya kurang dari sepertiga biaya masing-masing model tersebut. Arena juga merujuk pada analisis skor steerability Ember untuk tugas kerja serta tugas dunia nyata yang dijalankan pengguna dengannya. Angka-angka ini berasal dari Arena sendiri; laporan Arena sebelumnya menempatkan Ember di peringkat #25 dengan peningkatan bersih +1.7%.
Sumber
Dapatkan berita seperti ini lewat push.
AI Tracker memberi tahu Anda saat ada perubahan pada alat yang Anda pakai.