Китайцы снова нашли способ написать «125B» мелким шрифтом, а «6B активных» — крупным.
Китайцы снова нашли способ написать «125B» мелким шрифтом, а «6B активных» — крупным. Alibaba открыла веса Qwen3.8-Flash-Next: мультимодальная MoE-модель с 125 млрд параметров, из которых на токен работают 6 млрд. Ещё 51 млрд параметров живут в отдельной n-gram-памяти. Это не значит, что перед нами «обычная модель на 6B», которую можно закинуть на любой ноутбук и победно улыбнуться. Полный вес, память и обвязка никуда не исчезают. Но направление понятное: рынок учится не только выращивать модели, а выжимать больше работы из меньшего активного куска. А это уже про скорость, стоимость запросов и шанс не покупать дата-центр ради каждого бота. Бенчмарки пусть спорят между собой. Нам интереснее, насколько быстро эта экономия доберётся до реальных продуктов.