Гайды

Как озвучить персонажа своим голосом: липсинк на русском

Задача «озвучить персонажа своим голосом» звучит сложнее, чем решается. Вы записываете голос на телефон, загружаете видео с персонажем, запускаете липсинк и получаете ролик, где губы двигаются в такт русской речи. Разбираем, какие исходники собрать и на что смотреть в результате.

Микрофон и бумажный персонаж на экране, звуковые волны из нитей между ними
Обложка создана в Krea 2 Large: голос с микрофона идёт к персонажу на экране.

Что понадобится перед стартом

Нужны два исходника. Первый: видео или картинка персонажа, лицо которого видно крупно и анфас, без резких поворотов головы. Второй: аудиодорожка с вашим голосом, записанная в тихой комнате.

  • запись от 10 до 60 секунд для первого теста
  • чистый звук без фоновой музыки и эха
  • ровная громкость, без обрывов фраз на границах файла

Если персонажа ещё нет, его можно сгенерировать: сначала картинку или короткое видео, потом голос, потом липсинк. Как создать персонажа и держать его одинаковым в разных сценах, мы показали в отдельном гайде.

Как записать голос правильно

Голос определяет половину результата. Записывайте на телефон в комнате со шторами, ковром или диваном: мягкие поверхности глушат эхо. Держите телефон в 20–30 см ото рта.

Говорите чуть медленнее обычного и делайте паузы между фразами. Липсинку проще синхронизироваться с чёткой речью, чем со скороговоркой. Если текст сложный, прочитайте его вслух два раза до записи: запинки потом убрать сложно.

Сохраняйте файл в mp3 или wav, название на латинице.

Как устроен процесс липсинка

Порядок одинаковый почти у всех инструментов:

  • Загрузите видео или картинку персонажа
  • Загрузите аудиофайл со своим голосом. Длина аудио должна совпадать с видео или быть короче
  • В задании укажите: синхронизация губ с аудио, внешность и фон не менять
  • Запустите генерацию и дождитесь результата
  • Сравните движение губ с фразами на слух, лучше в наушниках

Если синхронность не устроила, поправьте аудио так, чтобы фраза начиналась близко к первому кадру движения рта, и запустите заново. Иногда помогает новая запись с более чёткой артикуляцией.

Типичные ошибки

Самая частая: тишина или шум в первые секунды аудио. Модель привязывает движение губ к началу дорожки, а речь начинается позже. Итог: персонаж шевелит губами в пустоту. Обрежьте аудио так, чтобы первый звук речи оказался в самом начале файла.

Вторая: длинная сцена, где персонаж поворачивает голову в профиль. Липсинк стабильнее работает анфас. Если без поворота не обойтись, сгенерируйте два коротких отрезка и склейте при монтаже.

Третья: скорость речи. Быстрая скороговорка сложнее для синхронизации, чем спокойный темп. Если результат расходится с картинкой, запишите текст медленнее, с паузами между фразами.

Как проверить результат

Проверка на слух важнее проверки глазами. Смотрите ролик три раза: с картинкой без звука, только звук, вместе на обычной скорости. Если на каком-то отрезке рассинхрон, точнее подрежьте аудио и перегенерируйте этот отрезок.

Ещё приём: уменьшите скорость воспроизведения до 0,5 и посмотрите начало и конец каждой фразы. Медленная скорость показывает расхождение, которое глаз пропускает на нормальной.

Небольшие расхождения в доли секунды обычно не мешают восприятию, особенно в коротких роликах для соцсетей.

Чек-лист перед публикацией

  • Лицо персонажа видно крупно и анфас в каждом ключевом отрезке
  • Аудио начинается с первого звука речи, без тишины в начале
  • Губы двигаются в начале каждой фразы, а не только в середине ролика
  • Звук и картинка совпадают в последней секунде
  • Речь записана без эха, фоновой музыки и запинок
  • Лицо не искажается между кадрами
  • Формат и длительность подходят под площадку публикации
  • Ролик прослушан в наушниках, а не только на колонке телефона

Озвучить персонажа своим голосом на русском можно без студии записи и монтажёра. Главное: чистая запись голоса, видео с лицом анфас и аккуратно подрезанное аудио. Генерация видео из картинки есть в Студии в режиме «Видео», а больше о работе с персонажами и серийным контентом рассказали на странице про микродрамы и вертикальные сериалы.

4 мин8
Попробуйте в Ubicomb StudioКартинки, видео, 3D и монтаж — в одном рабочем пространстве.
Открыть студию