Cognition、Thinking MachinesのInkling-Smallをベースにした、より高速で低価格なコーディングモデル「SWE-2 Flash」を発表

Cognitionは、Thinking MachinesのInkling-Small（総計276B、アクティブ12Bのパラメーター）をベースにしたコーディングモデル「SWE-2 Flash」を発表しました。Cognitionによると、SWE-2より5倍低コストで3倍高速に動作し、主要な評価ベンチマークでは、3倍の規模を持つモデルも含め、米国のすべてのオープンウェイトモデルを上回るとのことです。これらはCognition自身による主張です。

Cognitionによると、強化学習の前に、中間学習の段階を初めて追加し、コード、科学論文、ブログの数兆トークンを使って学習した後、大規模な強化学習を実施しました。SWE-2からの性能向上の大半は、より高品質で多様な強化学習タスクによるものだと同社は説明しています。研究者らは、その指示、環境、検証器を監査したとのことです。

SWE-2 Flashは11月末まで、Devin DesktopとDevin CLIでPro、Max、Teamsのユーザーに無料で提供されます。Cognitionは、透明性とサイバーリスクのバランスを取るため、パートナーや研究者にウェイトを安全に共有するプログラムを構築中で、詳細は今後数週間以内に発表するとしています。