🧠 Яндекс отдал всем основу модели, которая пишет ответы у него в Поиске
🧠 Яндекс отдал всем основу модели, которая пишет ответы у него в Поиске Веса выложены открыто, брать и дообучать можно даже под коммерческие продукты. Внутри 35 миллиардов параметров, но на каждое слово работает меньше двух процентов из них. Из чего собрана модель: ✧ Держит 128 тысяч токенов за раз ✧ Обучена на 15 триллионах токенов ✧ Рядом крошечная модель-фильтр на 80 млн ✧ Ответы под поиском читают 49 млн человек ✧ Дообучение для Поиска осталось закрытым Яндекс не прячет таблицу, где его модель проигрывает китайской Qwen в десяти строках из тринадцати. 🔗 Внутри - что именно открыли, где модель сильнее конкурентов и что нужно, чтобы запустить её у себя #яндекс #алиса
51 просмотров