Kernel: Gemini 4 Carbon mất gần một giờ cho các tác vụ sửa lỗi mà Opus và Astra hoàn thành trong vài phút
Kernel, công ty thực hiện các bài đánh giá lập trình riêng, cho biết trong các tác vụ chẩn đoán và sửa lỗi, Gemini 4 Carbon mất gần một giờ, trong khi Claude Opus 5.5 và GPT-6 Astra chỉ mất vài phút. Đây là số liệu do Kernel tự đo, không phải của Google; công ty cũng dẫn lời người dùng trên mạng xã hội cho biết họ gặp tình trạng chậm tương tự.
Kernel cho rằng khoảng cách này xuất phát từ ba nguyên nhân:
- Suy luận chậm hơn: mỗi bước mất nhiều thời gian hơn; theo Kernel, điều này giải thích 16–30% thời gian tăng thêm so với Astra và 45–49% so với Opus.
- Làm nhiều việc hơn: Carbon thực hiện số bước gấp khoảng bảy lần Astra, số thao tác gấp mười một lần và xử lý lượng đầu vào lớn hơn mười sáu lần. Khoảng một nửa số bước của Carbon dành cho những việc không được yêu cầu trong phiếu lỗi, chẳng hạn rà soát mã ngoài phạm vi lỗi và đề phòng những trường hợp mà phiếu đã loại trừ.
- Kém hiệu quả về mặt thao tác: Carbon gọi công cụ khoảng một lần mỗi bước, so với hơn hai lần của Astra; 39% số dòng Carbon đọc là những dòng nó đã xem trước đó, so với 7% ở Astra. Kernel ước tính các yếu tố này chiếm khoảng một phần tư thời gian chạy dư ra.
Kernel cho biết bộ khung kiểm thử không phải nguyên nhân (opencode và mini-SWE-agent không tạo ra khác biệt đáng kể), đồng thời Carbon thường không sửa được lỗi khi mức độ nỗ lực thấp. Trong một lần chạy lại, khi được hỏi cứ sau mỗi năm lượt liệu đã có đủ thông tin để sửa lỗi chưa, Carbon hoàn thành trong 28 phút thay vì 37 phút.
Nguồn
- Vì sao Gemini 4 Carbon mất nhiều thời gian đến vậy?Hacker News · 42 bình luận
Nhận tin như thế này qua thông báo đẩy.
AI Tracker báo cho bạn khi công cụ bạn dùng có thay đổi.