Компания Meta объявила о запуске новой функции голосового дубляжа для видео Reels на глобальном уровне. Эта технология использует генеративный искусственный интеллект для перевода голоса пользователя с синхронизацией движения губ.
Чтобы активировать эту функцию, пользователю необходимо выбрать опцию "Перевести ваш голос с помощью Meta AI" перед публикацией видео. После этого инструмент генерирует аудиотрек перевода, сохраняя интонацию оригинального голоса. Пользователь также может активировать синхронизацию движения губ с переведенным аудио.
Перед публикацией автор может просмотреть результат и решить, добавлять ли синхронизацию. В видео с переводом появляется сообщение о использовании искусственного интеллекта.
Эта функция сейчас доступна для создателей контента на Facebook с более чем 1000 подписчиков, а также для всех пользователей с публичными аккаунтами в Instagram. Meta рекомендует использовать этот инструмент в видео, где автор обращается к камере, избегая фоновой музыки и закрытия рта. Система поддерживает до двух говорящих, но компания советует избегать наложения голосов.
Meta позиционирует эту новую функцию как инструмент для расширения аудитории контента за пределами родного языка автора. Также внедрен инструмент для оценки эффективности перевода.
На начальном этапе функция перевода доступна только для английского и испанского языков, но компания планирует расширить языковую поддержку в будущем.
