Даббинг c ИИ это просто?
Решили проверить популярные ИИ инструменты для даббинга (перевода и дубляжа) видео.
Выбрали 3 сервиса: Elevenlabs.io, Rask.ai и Maestra.ai. Почему их? Потому что уже есть опыт работы с ними и анализ более 10 схожих сервисов, на наш взгляд эти одни их лучших.
Тестируем только в бесплатном режиме - все 3 сервиса позволяют это сделать с рядом ограничений:
- нет возможности редактировать текст речи
- 10 000 символов или около 3-х минут видео
- нет возможности выгрузить видео с субтитрами, отдельно аудио или субтитры
- 3 видео по 1 минуте
- нет возможности выбрать функцию клонирования голоса, необходимо выбирать из существующих голосов
- нет функции автодетекта количества голосов на видео (считаем и выбираем руками)
- 6 000 символов или около 10 минут видео
Итак, на входе у нас одинаковое видео для всех троих участников: 30-секундный трейлер английской постановки пьесы “Гарри Поттер и Проклятое дитя”.
Условия теста: никаких ручных правок, все по умолчанию.
Результат удивил! Явный лидер в СМИ, Elevenlabs, уступил первенство Rask по качеству дубляжа. При этом, лидер Rask - явно позиционирует себя в другой ценовой категории, при этом, ТУТ ВНИМАНИЕ: Rask и Maestra используют API Elevenlabs для функции клонирования голоса 😂
Сравнение ИИ инструментов для видео даббинга
Основной вывод: все сервисы требует ручного вмешательства для обработки финального результата!
Большим преимуществом в этом случае выглядит наличие возможности редактирования текста, в том числе под скорость речи, а также, применение ИИ для адаптации перевода, именно в этом качестве себя хорошо показывает Maestra, но мы ведь проводим тест без “ручных” правок.
Результаты нашего батла вы можете увидеть и оценить сами. Пишите в комментариях, кто вам понравился больше!
Версия Rask
Версия Elevenlabs
Версия Maestra
Читайте нас в Telegram
Не является рекламой. Все данные взяты в открытом доступе. Все выводы и соображения, содержащиеся в посте, являются мнением авторов блога.