Сбер открыл веса GigaChat 3.5 Ultra: гибрид с линейным вниманием
Сбер открыл веса GigaChat 3.5 Ultra: гибрид с линейным вниманием 6 июля 2026 Сбер выложил в открытый доступ флагманскую модель GigaChat 3.5 Ultra — 432 млрд параметров (28 млрд активных). Она стала примерно на 40% компактнее предыдущей GigaChat 3.1 Ultra, но сильнее в коде, математике и агентных сценариях. Ключевая особенность — гибридная архитектура: часть слоёв использует обычное MLA-внимание, часть — линейное внимание на базе GatedDeltaNet. Это снижает объём KV-кэша примерно в 4 раза и позволяет держать вдвое больше контекста при том же объёме памяти. Лицензия MIT, веса уже на Hugging Face. По данным команды, базовая версия обходит DeepSeek V3.2 Exp Base и V4 Flash Base в общих задачах, математике и коде. Для российской экосистемы это один из самых серьёзных открытых релизов, который реально претендует на конкуренцию с ведущими мировыми open-weight моделями. Стоит понаблюдать за тем: как быстро сообщество начнёт дообучать модель под прикладные задачи?... Источники: https://habr.com/ru/companies/sberbank/articles/1055826/ https://huggingface.co/ai-sage/GigaChat3.5-432B-A28B https://www.sberbank.ru/ru/sberpress/all/article?newsID=6282c09c-0d12-4fe3-8fec-99175ccac74f&blockID=1303®ionID=77&lang=ru&type=NEWS #AI #RussianAI #GigaChat #Sber #OpenSource #LLM