Компания Meta объявила о глобальном запуске новой функции голосового дубляжа для видео Reels. Технология работает на основе генеративного ИИ, переводящего голос пользователя и синхронизирующего движения губ с переводом.
Чтобы воспользоваться функцией, перед публикацией ролика нужно выбрать опцию «Переводить ваш голос с помощью Meta AI». Система создает аудиодорожку перевода, сохраняя интонацию оригинального голоса, после чего можно дополнительно активировать синхронизацию губ с новым аудио. Автор может предварительно просмотреть результат и решить, включать ли синхронизацию. В видео с переводом отображается отметка об использовании ИИ.
Функция уже доступна для авторов в Facebook с более чем 1000 подписчиков и для всех пользователей с публичными аккаунтами в Instagram. Meta рекомендует использовать инструмент в видео с прямым обращением к камере, без фоновой музыки либо перекрытия рта. Система поддерживает до двух говорящих, однако нежелательно, чтобы накладывались голоса.
В компании отмечают, что новая функция поможет авторам расширить аудиторию контента вне их родного языка. Для этого также внедрен инструмент оценки эффективности перевода на языки. Перевод доступен только на английском и испанском языках, но Meta планирует расширять языковую поддержку в дальнейшем.
