Mercor công bố kết quả APEX của Inkling 2 Small, cao hơn Inkling 13 điểm trên APEX-Agents

Mercor, đơn vị cho biết đã hỗ trợ Thinking Machines đánh giá Inkling 2 Small trước khi ra mắt, công bố điểm số của mô hình trên các bảng xếp hạng APEX của mình:

• APEX-Agents: Pass@1 đạt 46.8% và điểm trung bình là 60.9%, cao hơn Inkling 13 điểm (Pass@1 đạt 33.8%, ra mắt vào tháng 7). Theo từng lĩnh vực, Pass@1 đạt 62.2% ở Luật (+12.5), 40.3% ở Tư vấn quản lý (+14.8) và 37.8% ở Ngân hàng đầu tư (+11.5).
• APEX-Accounting: Pass@1 đạt 14.5% và điểm trung bình là 62.0%. Mercor gọi đây là mô hình mở có điểm cao thứ hai tại đây, sau Kimi K3.1 Pro (điểm trung bình 62.4%).

Đây là số liệu do chính Mercor công bố.