Cartesia Managed Agents scoort 1115 Elo op Artificial Analysis' Speech Agent Arena
Artificial Analysis meldt dat Cartesia Managed Agents, Cartesia's volledig beheerde platform voor het bouwen en inzetten van voice agents, een Elo-score van 1115 behaalt (95%-BI 1086–1144, 685 samples) op zijn Speech Agent Arena: 98 punten meer dan Cartesia's eerdere voice-agentproduct, Cartesia Line (1017). De betrouwbaarheidsintervallen overlappen niet. De resultaten zijn afkomstig van Artificial Analysis zelf.
Gerapporteerde resultaten:
- Voor taken waarvoor toolaanroepen nodig zijn, behaalt Managed Agents een Elo-score van 1112.
- De Task Success Rate, het aandeel in aanmerking komende gesprekken met toolaanroepen dat eindigt met de juiste laatste toolaanroep om de taak te voltooien, is 91,7%, tegenover 77,5% voor Cartesia Line.
In de arena voeren mensen live, geblindeerde voicegesprekken met twee verborgen systemen over dezelfde taak en kiezen ze welk systeem hun voorkeur heeft. Managed Agents is een cascadesysteem: Cartesia's spraak-naar-tekstmodel Ink en tekst-naar-spraakmodel Sonic werken samen met een LLM naar keuze van de ontwikkelaar. Artificial Analysis testte het met GPT-5.5 en de stemmen Skylar en Daniel.
Artificial Analysis vermeldt een prijs van $0.06 per minuut gesprekstijd ($3.60 per uur), waarbij het gebruik van de LLM afzonderlijk per model in rekening wordt gebracht.
Bronnen
Krijg nieuws als dit als pushmelding.
AI Tracker waarschuwt je zodra er iets verandert aan de tools die je gebruikt.