AI TrackerDownload
← Al het nieuws
GoogleModellenCoderen

Kernel: Gemini 4 Carbon deed bijna een uur over bugfixes waarvoor Opus en Astra maar enkele minuten nodig hebben

Kernel, een bedrijf dat private codeerevaluaties uitvoert, zegt dat Gemini 4 Carbon voor taken rond het diagnosticeren en oplossen van bugs bijna een uur nodig had, terwijl Claude Opus 5.5 en GPT-6 Astra die in enkele minuten afhandelden. Dit zijn eigen metingen van Kernel, geen metingen van Google; het bedrijf haalt ook gebruikers op sociale media aan die dezelfde traagheid melden.

Kernel schrijft het verschil toe aan drie oorzaken:

  • Langzamere inferentie: elke stap duurt langer. Volgens Kernel verklaart dit 16–30% van de extra tijd ten opzichte van Astra en 45–49% ten opzichte van Opus.
  • Meer werk: Carbon zette ongeveer zeven keer zoveel stappen als Astra, voerde elf keer zoveel acties uit en verwerkte ruim zestien keer zoveel invoer. Ongeveer de helft van de stappen ging op aan werk waar het ticket niet om vroeg, zoals code controleren buiten de bug om en zich indekken tegen gevallen die het ticket expliciet had uitgesloten.
  • Mechanische inefficiënties: ongeveer één toolaanroep per stap, tegenover meer dan twee voor Astra; bovendien bestond 39% van de gelezen regels uit regels die het model al eerder had gezien, tegenover 7% voor Astra. Kernel schat dat dit ongeveer een kwart van de extra looptijd verklaart.

Kernel zegt dat de harness niet de oorzaak is (opencode en mini-SWE-agent leverden geen betekenisvol verschil op) en dat Carbon bij lage inspanning vaak geen oplossing wist te produceren. Bij een nieuwe run waarin Carbon om de vijf beurten werd gevraagd of het genoeg informatie had om de fix uit te voeren, was het in 28 minuten klaar in plaats van 37.

Krijg nieuws als dit als pushmelding.

AI Tracker waarschuwt je zodra er iets verandert aan de tools die je gebruikt.

Download de app