Falcon
Falcon Выделение голоса нужного человека из шумной записи по видео его рта. Потоковое, причинное, то есть работает по ходу разговора, а не по готовому файлу • Отделяет целевую речь от соседей, дальних голосов и внезапного шума • Подсказка только визуальная: губы говорящего, без образца голоса • Одна модель на разные сцены: переговорка, зал, улица • Быстрая обработка для связки с распознаванием речи • 0.5M • Задержка 51,3 мс на GPU • На 91,9% меньше параметров, чем у AV-TFGridNet • В 20 раз меньше вычислений и в 11 раз быстрее hf.co/JusperLee/Falcon github.com/JusperLee/Falcon hf.co/spaces/JusperLee/Falcon-Studio #audioseparation #unmix #denoise
56 просмотров