Компания Meta объявила о запуске новой функции голосового дубляжа, позволяющей пользователям создавать видео Reels с синхронизированным переводом голосов. Благодаря технологии генеративного ИИ, пользователи могут легко переводить свои записи, сохраняя при этом естественные интонации.

Чтобы воспользоваться этой функцией, необходимо выбрать опцию "Переводить ваш голос с Meta AI" перед публикацией видео. После этого система автоматически создает аудиодорожку, которая отражает оригинальный голос, и предоставляет возможность синхронизации с движениями губ.

Перед публикацией автор может просмотреть результат и решить, хочет ли он добавить синхронизацию. В видео с переводами будет отображаться сообщение о использовании технологии ИИ.

На данный момент эта функция доступна для контент-творцов на Facebook с более чем 1000 подписчиками и для всех пользователей с публичными аккаунтами в Instagram. Meta рекомендует использовать этот инструмент в видео, содержащих прямые обращения к камере, без избыточной фоновой музыки и закрытия рта. Система поддерживает до двух говорящих, но рекомендуется избегать наложения голосов.

Компания представляет этот новый инструмент как возможность расширить аудиторию контента за пределами родного языка автора. Также был разработан инструмент для оценки эффективности перевода.

На старте функция перевода доступна только для английского и испанского языков, однако Meta планирует в будущем расширить языковую поддержку.