Le test de Paweł Huryn sur 105 bugs place GPT-6.2 Astra en tête avec un score de 62,7 pour 28,35 $
Paweł Huryn dit avoir testé des modèles sur deux dépôts contenant 105 bugs réintroduits, en leur demandant de trouver et de corriger autant de problèmes que possible. Il présente GPT-6.2 Astra comme le nouveau n° 1 et le juge performant en revue de code.
Ses scores, avec le coût de chaque test :
- GPT-6.2 Astra (max) : 62,7 pour 28,35 $
- GPT-6.2 Astra (xhigh) : 60 pour 23,53 $
- Claude Fable 5.2 (max) : 58 pour 139,65 $
- Gemini 4 Carbon (high) : 57,3 pour 31,32 $
- Claude Sonnet 5.5 (max) : 51,3 pour 154,03 $
- GPT-6 Astra (max) : 45 pour 33,03 $
Cela représente 17,7 points de plus que GPT-6 Astra en mode max et 17 points de plus en mode xhigh. Huryn indique que GPT-6.2 Sol et d’autres niveaux d’effort suivront dans le fil. Ces résultats sont les siens et proviennent d’un seul test ; la publication avait recueilli 1 343 points sur X au 18 novembre.
Sources
Recevez ce genre d'actus en notification.
AI Tracker vous prévient dès que quelque chose change pour les outils que vous utilisez.