Mercor : GPT-6.2 Astra débute à la 1re place de son benchmark de codage OpenWorldEngineer avec 67,2 %
Mercor affirme avoir testé GPT-6.2 Astra et GPT-6.2 Sol avant leur lancement, et indique qu’Astra arrive en tête de son nouveau benchmark OpenWorldEngineer, qui couvre 26 projets d’ingénierie et de recherche à long terme, avec un score moyen de 67,2 %. Le classement place Claude Fable 5.2 à 54,6 % et GPT-6 Astra à 44,2 %.
Selon Mercor, Astra arrive en tête dans les quatre domaines : développement logiciel, 65,9 % ; ingénierie, 83,7 % ; apprentissage automatique, 62,9 % ; et sciences, 60,4 %. Ces chiffres proviennent de Mercor, et la publication ne donne pas le score de GPT-6.2 Sol.
La publication avait recueilli 815 points sur X au 18 novembre.
Sources
Recevez ce genre d'actus en notification.
AI Tracker vous prévient dès que quelque chose change pour les outils que vous utilisez.