Kandinsky Avatar 1.0
Kandinsky Avatar 1.0 Сбер открыл веса Kandinsky S2V — это #speech2video модель: на входе голос и одна фотография, на выходе говорящий аватар. Анимируется вся фигура, не только голова: артикуляция, мимика, наклон головы, жесты - Pro на 21B — HD, Lite на 2B — SD и домашняя видеокарта - 16 шагов pi-Flow дистилляции, генерится чанками по 5 секунд, между ними память FramePack - звук модель не создает, она оживляет человека с референса под готовую запись - обучение на более чем миллионе видеофрагментов на 95 языках Коммерческое использование разрешено: MIT на код и веса. Тяжелая часть: Pro не влезает целиком даже на 80 ГБ, нужен CPU-offload, пик около 50 ГБ github.com/kandinskylab/kandinsky-s2v hf.co/collections/kandinskylab/kandinsky-s2v-10 hf.co/spaces/kandinskylab/Kandinsky-S2V-1.0-Demo #avatar #characteranimation #i2v