DittoDub дублирует видео на 109 языков. Что проверить

DittoDub сделал Native 6 моделью дубляжа по умолчанию для всех видео, которые загружают на платформу. Модель работает со 109 языками и 126 вариантами диалектов и обещает перенести в перевод голос, энергию и эмоциональную подачу спикера. Если вы ищете нейросеть для озвучки видео сразу на несколько рынков, давайте посмотрим, как устроен процесс и где в нём всё равно нужна голова человека.

Нейросеть для озвучки видео: как работает Native 6

Схема короткая. Вы загружаете готовое видео, выбираете целевые языки, а перед публикацией смотрите перевод и вокал и правите их в редакторе. Если вы раньше искали дикторов под каждый язык, разница заметна сразу.

CEO и сооснователь DittoDub Нейт Стоун формулирует задачу так: зрители привязываются к личности автора, к тому, как он рассказывает историю и подаёт шутку, и при переходе в другой язык эта личность должна переехать вместе с видео. Красивая цель. Как модель справляется со сленгом, иронией и фирменными фразами бренда, я оценить не могу: в источнике есть заявления компании и демо на её странице, независимых тестов нет.

Поэтому я бы смотрел именно на редактор. Шутка или слоган вряд ли ляжут в перевод с первого раза, и возможность поправить текст и вокал до выхода ролика решает, годится ли инструмент для клиентской работы.

Субтитры, YouTube Sync и подписка от $50

Native 6 работает с несколькими спикерами. Кроме дубляжа платформа готовит субтитры и переводит названия и описания роликов. Для тех, кто публикует на YouTube, есть расширение YouTube Sync: оно переносит все эти материалы прямо в YouTube Studio. Менеджеру не нужно собирать десяток файлов под каждую языковую версию и раскладывать их руками.

Платформа продаётся по месячной подписке, самые дешёвые тарифы начинаются примерно с $50 в месяц. Что входит в этот тариф, сколько минут видео он покрывает и чем отличаются старшие планы, в источнике не сказано. Откройте сайт и посчитайте на своём объёме. Потом сравните с вашей текущей сметой на озвучку одной языковой версии: так вы увидите свою разницу, а не абстрактную.

Что я бы сделал завтра

• Возьмите один готовый ролик и прогоните его на двух-трёх языках, которые нужны клиенту. Дайте результат носителям и попросите отметить места, где звучит криво.
• Загрузите ролик, где говорят двое и больше, и проверьте, как модель разводит голоса.
• Откройте редактор и поправьте перевод слогана и названия продукта. Засеките, сколько времени ушло: это ваша реальная стоимость правок.
• Загляните в договор со спикером или актёром. Есть ли там пункт о переносе голоса и манеры в другие языки? Если нет, вопрос лучше решить до запуска кампании.

Сложные художественные задачи и дорогой имиджевый креатив я бы по-прежнему не отдавал одной модели без проверки живым человеком. Для обучающих видео, продуктовых обзоров и рекламных роликов под тест нового рынка такой формат стоит попробовать.

Дубляж решает половину задачи международного релиза, вторая половина – сам ролик. Как выглядит AI-производство, где нейросети дают скорость, а режиссуру, монтаж и звук делают люди, можно посмотреть на странице AI-видеопродакшн Мити Амбарцумяна. Там лежат, например, межпрограммный фильм «Окко. Спорт в цифрах» про падел и имиджевый тизер OREX для платформы земли в Дубае, который работает в продажах.