Mercor merilis hasil APEX untuk Inkling 2 Small, unggul 13 poin dari Inkling di APEX-Agents

Mercor, yang mengatakan telah membantu Thinking Machines mengevaluasi Inkling 2 Small sebelum peluncurannya, melaporkan skor model tersebut di papan peringkat APEX miliknya:

• APEX-Agents: Pass@1 sebesar 46.8% dan skor rata-rata 60.9%, unggul 13 poin dari Inkling (Pass@1 33.8%, diluncurkan pada Juli). Berdasarkan bidang, Pass@1 mencapai 62.2% di Law (+12.5), 40.3% di Management Consulting (+14.8), dan 37.8% di Investment Banking (+11.5).
• APEX-Accounting: Pass@1 sebesar 14.5% dan skor rata-rata 62.0%. Mercor menyebutnya model terbuka dengan skor tertinggi kedua di sana, di bawah Kimi K3.1 Pro (skor rata-rata 62.4%).

Angka-angka ini berasal dari Mercor sendiri.