Arena의 Agent Arena, 출력 토큰 및 대기 시간 대비 성능 그래프 추가

리더보드 제공업체 Arena는 Agent Arena에서 작업 비용뿐 아니라 생성된 출력 토큰당, 그리고 사용자가 기다리는 1분당 어떤 에이전트가 최고의 성능을 내는지 확인할 수 있게 됐다고 밝혔습니다. Arena에 따르면 같은 수준의 지능을 얻는 데 비용이 10배 더 들고, 출력 토큰이 6배 더 필요하며, 시간도 두 배 더 걸릴 수 있습니다.

Arena는 실제 사용 데이터를 바탕으로 한 이 그래프를 통해 지능이 높아질수록 비용이 가장 가파르게 증가하고, 더 오래 기다리는 효과는 일정하지 않으며, 출력 토큰 수는 청구 금액을 거의 예측하지 못한다고 설명합니다. 수치는 Arena 자체 자료입니다. 그래프는 arena.ai의 Agent Arena 파레토 리더보드에서 확인할 수 있습니다.