Agent Arena của Arena bổ sung biểu đồ hiệu suất theo số token đầu ra và thời gian chờ

Arena, đơn vị công bố bảng xếp hạng, cho biết Agent Arena hiện hiển thị những agent nào đạt hiệu suất tốt nhất trên mỗi token đầu ra được tạo và mỗi phút người dùng phải chờ, bên cạnh chi phí thực hiện tác vụ. Arena cho biết cùng một mức độ thông minh có thể tốn kém gấp 10×, cần số token đầu ra gấp 6× và mất thời gian gấp đôi.

Dựa trên các biểu đồ này, được xây dựng từ hoạt động sử dụng thực tế trên Arena, hãng cho biết chi phí tăng mạnh nhất theo mức độ thông minh, chờ lâu hơn không phải lúc nào cũng đem lại lợi ích tương xứng, còn số token đầu ra hầu như không dự đoán được hóa đơn. Các số liệu là của chính Arena. Có thể xem biểu đồ trên bảng xếp hạng Pareto của Agent Arena tại arena.ai.