Kernel: Gemini 4 Carbon тратил почти час на исправление ошибок, с которыми Opus и Astra справляются за минуты
Kernel, компания, проводящая закрытые тесты моделей для программирования, сообщает, что на задачах по диагностике и исправлению ошибок Gemini 4 Carbon тратил почти час, тогда как Claude Opus 5.5 и GPT-6 Astra справлялись за несколько минут. Это собственные замеры Kernel, а не Google; компания также приводит сообщения пользователей в соцсетях, которые отмечают такую же медлительность.
Kernel связывает разницу с тремя причинами:
- Более медленный инференс: каждый шаг занимает больше времени; по оценке Kernel, этим объясняется 16–30% дополнительного времени по сравнению с Astra и 45–49% — по сравнению с Opus.
- Больше работы: Carbon сделал примерно в семь раз больше шагов, чем Astra, выполнил в одиннадцать раз больше действий и обработал более чем в шестнадцать раз больше входных данных. Около половины шагов ушло на задачи, которых не было в запросе: например, на проверку кода за пределами исправляемой ошибки и обработку случаев, которые в описании задачи были исключены.
- Механическая неэффективность: примерно один вызов инструмента на шаг против более чем двух у Astra; кроме того, 39% прочитанных строк Carbon уже видел раньше, тогда как у Astra этот показатель составил 7%. По оценке Kernel, на это приходится примерно четверть избыточного времени выполнения.
Kernel утверждает, что дело не в тестовом окружении: opencode и mini-SWE-agent не дали заметной разницы. Также компания отмечает, что при низкой интенсивности работы Carbon часто не мог предложить исправление. В одном повторном запуске Carbon каждые пять ходов спрашивали, достаточно ли у него данных для исправления; в результате он справился за 28 минут вместо 37.
Источники
- Почему Gemini 4 Carbon работает так медленно?Hacker News · 42 комментария
Получайте такие новости в push.
AI Tracker сообщит, когда что-то меняется в ваших инструментах.