Cartesia Managed Agents набирает 1115 Elo в Speech Agent Arena от Artificial Analysis
По данным Artificial Analysis, Cartesia Managed Agents — полностью управляемая платформа Cartesia для создания и развертывания голосовых агентов — набирает 1115 Elo в её Speech Agent Arena (95% ДИ: 1086–1144; 685 образцов). Это на 98 баллов выше результата более раннего голосового продукта Cartesia, Cartesia Line (1017). Доверительные интервалы не пересекаются. Результаты предоставлены самой Artificial Analysis.
Результаты, указанные в отчёте:
- В задачах, требующих вызова инструментов, Managed Agents набирает 1112 Elo.
- Доля успешного выполнения задач (Task Success Rate) — процент подходящих диалогов с вызовом инструментов, которые заканчиваются правильным финальным вызовом инструмента для выполнения задачи, — составляет 91,7% против 77,5% у Cartesia Line.
На арене люди ведут вслепую живые голосовые диалоги с двумя скрытыми системами на одну и ту же тему и выбирают ту, которая им больше нравится. Managed Agents — каскадная система: модели Cartesia Ink для преобразования речи в текст и Sonic для преобразования текста в речь работают совместно с выбранной разработчиком LLM. Artificial Analysis тестировала её с GPT-5.5 и голосами Skylar и Daniel.
Artificial Analysis указывает цену $0.06 за минуту звонка ($3.60 в час); использование LLM оплачивается отдельно в зависимости от модели.
Источники
Получайте такие новости в push.
AI Tracker сообщит, когда что-то меняется в ваших инструментах.