Artificial Analysis оценила open-weight модель Nanbeige4.3-33B в 20 баллов по индексу Intelligence Index — наравне с Qwen3.8 27B
По данным Artificial Analysis, Nanbeige4.3-33B — open-weight модель от Nanbeige (команды, занимающейся базовыми моделями в китайской платформе по найму BOSS Zhipin) — набрала 20 баллов по версии 5 индекса Intelligence Index, столько же, сколько Qwen3.8 27B (xhigh). Обе модели имеют плотную архитектуру, а общее число параметров составляет 33B и 27B соответственно. Artificial Analysis отмечает, что модель Nanbeige лучше справляется с использованием терминала, но хуже отвечает на вопросы, требующие знаний, и устанавливает новую точку на границе Парето для соотношения Intelligence Index и общего числа параметров.
По данным Artificial Analysis:
- Знания: в тесте AA-Omniscience v1.1 доля галлюцинаций у модели составляет 18% против 29% у Qwen3.8 27B — модель чаще воздерживается от ответов: доля вопросов, на которые она пытается ответить, составляет 29% против 43%. При этом Qwen в целом правильно отвечает на большее число вопросов: 17% против 12%.
- Токены: Nanbeige4.3-33B использовала 158K выходных токенов на задачу Intelligence Index против 110K у Qwen3.8 27B — на 44% больше при том же результате. Показатель учитывает токены ответов и рассуждений в девяти оценках версии 5, включая ходы с использованием инструментов в агентных сценариях.
Веса модели доступны на Hugging Face. Это собственные измерения Artificial Analysis; Nanbeige выпустила модель 25 октября.
Источники
Получайте такие новости в push.
AI Tracker сообщит, когда что-то меняется в ваших инструментах.