Обычно, чтобы воссоздать чей-то голос, хватает короткого примера речи. Но что, если эта...
Обычно, чтобы воссоздать чей-то голос, хватает короткого примера речи. Но что, если эта речь была произнесена в 19 веке, когда качество было совсем другим? Рассказываем, как Яндекс восстановил голос Льва Толстого к его 198-му дню рождения. В чём проблема Чтобы говорить чужим голосом, модель изучает тембр и манеру на исходной записи и дальше говорит по этому описанию. Но у Толстого сохранилось около 30 минут записей голоса, на них много шума, а часть частотного диапазона техника того времени просто не писала. Поэтому модели, которой нужен чистый сигнал, не из чего было клонировать голос. Запись пробовали восстановить, искали голос-двойник, позвали диктора с близким тембром и дообучили модель на его записи — ничего не помогло. Как решили В службе синтеза речи Яндекса нашли самый чистый оригинальный фрагмент и отдали модели как начало её собственной речи. Тогда ей не пришлось имитировать голос, модель продолжила начатую фразу и подхватила оригинальную интонацию и тембр голоса. А можно послушать? С 9 по 14 сентября в чате с Алисой AI можно выбрать ИИ-персонажа Толстого и о чём-нибудь его спросить, он отвечает цитатами из своих произведений и дневников. В голосовом режиме и на Яндекс Станции эти цитаты прозвучат тем самым воссозданным голосом. Подписывайтесь 👉 @techno_yandex
Канал в каталоге Максиметера
4 642 подписчиков · IT и технологии