Mercor veröffentlicht APEX-Ergebnisse für Inkling 2 Small: 13 Punkte Vorsprung vor Inkling auf APEX-Agents

Mercor, das nach eigenen Angaben Thinking Machines bei der Evaluierung von Inkling 2 Small vor dem Start unterstützt hat, veröffentlicht die Ergebnisse des Modells auf seinen APEX-Bestenlisten:

• APEX-Agents: 46,8 % Pass@1 und ein Durchschnittswert von 60,9 %, 13 Punkte mehr als Inkling (33,8 % Pass@1, im Juli gestartet). Nach Fachgebiet liegt Pass@1 bei 62,2 % in Recht (+12,5), 40,3 % in Unternehmensberatung (+14,8) und 37,8 % im Investmentbanking (+11,5).
• APEX-Accounting: 14,5 % Pass@1 und ein Durchschnittswert von 62,0 %. Mercor bezeichnet es dort als das Open Model mit dem zweithöchsten Ergebnis, hinter Kimi K3.1 Pro (Durchschnittswert 62,4 %).

Dies sind die eigenen Zahlen von Mercor.