Arena’s Agent Arena dodaje wykresy wydajności względem liczby tokenów wyjściowych i czasu oczekiwania
Arena, wydawca rankingów, informuje, że Agent Arena pokazuje teraz, które agenty zapewniają najlepszą wydajność w przeliczeniu na każdy wygenerowany token wyjściowy i każdą minutę oczekiwania użytkownika, oprócz kosztu wykonania zadania. Według Areny ten sam poziom inteligencji może kosztować 10× więcej, wymagać 6× więcej tokenów wyjściowych i trwać dwa razy dłużej.
Na podstawie tych wykresów, opracowanych na podstawie rzeczywistego użycia na Arenie, firma twierdzi, że koszty rosną najszybciej wraz z inteligencją, dłuższe oczekiwanie przynosi nierówne korzyści, a liczba tokenów wyjściowych prawie nie pozwala przewidzieć rachunku. Dane pochodzą od samej Areny. Wykresy są dostępne w rankingu Pareto Agent Arena na arena.ai.
Źródła
Otrzymuj takie wiadomości jako push.
AI Tracker powiadomi Cię, gdy coś zmieni się w narzędziach, których używasz.