Mercor publica los resultados de APEX para Inkling 2 Small, 13 puntos por encima de Inkling en APEX-Agents

Mercor, que afirma haber ayudado a Thinking Machines a evaluar Inkling 2 Small antes de su lanzamiento, informa de las puntuaciones del modelo en sus tablas de clasificación APEX:

• APEX-Agents: 46,8 % en Pass@1 y una puntuación media de 60,9 %, 13 puntos por encima de Inkling (33,8 % en Pass@1, lanzado en julio). Por ámbito, Pass@1 es del 62,2 % en Derecho (+12,5), del 40,3 % en Consultoría de gestión (+14,8) y del 37,8 % en Banca de inversión (+11,5).
• APEX-Accounting: 14,5 % en Pass@1 y una puntuación media de 62,0 %. Mercor lo considera el segundo modelo abierto con mayor puntuación en esa categoría, por detrás de Kimi K3.1 Pro (62,4 % de puntuación media).

Estas son cifras de Mercor.