AI Trackerアプリ
← すべてのニュース

Kernel:Gemini 4 Carbonは、OpusやAstraなら数分で終えるバグ修正タスクに、ほぼ1時間かかった

非公開のコーディング評価を実施する企業Kernelによると、バグの診断と修正のタスクで、Gemini 4 Carbonはほぼ1時間かかった一方、Claude Opus 5.5とGPT-6 Astraは数分で完了した。これはGoogleによる測定ではなく、Kernel独自の測定結果だ。また、SNS上で同様の遅さを報告するユーザーの声も引用している。

Kernelは、差が生じた原因を次の3つに挙げている。

  • 推論速度の遅さ: 各ステップに時間がかかり、Astraより余分にかかった時間の16~30%、Opusより余分にかかった時間の45~49%を説明できるという。
  • 作業量の多さ: Carbonのステップ数はAstraの約7倍、アクション数は11倍に達し、処理した入力も16倍を超えた。ステップの約半分は、バグ以外のコードの監査や、チケットで対象外とされたケースへの対策など、チケットで求められていない作業に費やされた。
  • 機械的な非効率: Astraが1ステップあたり2回超のツール呼び出しを行ったのに対し、Carbonは約1回。また、読み込んだ行の39%が既読の行だった(Astraは7%)。Kernelは、これらが実行時間の超過分のおよそ4分の1を占めると見積もっている。

Kernelによると、原因はハーネスではない(opencodeとmini-SWE-agentで有意な差はなかった)。また、低いeffort設定では、Carbonは修正を作れないことが多かったという。Carbonに5ターンごとに修正に必要な情報がそろったか尋ねるようにした再実行では、37分ではなく28分で完了した。

こんなニュースをプッシュで。

使っているツールに変化があると、AI Tracker がお知らせします。

アプリを入手