MARS5 — новая бесплатная нейросеть для клонирования голоса на 140 языках
Вышла MARS5 — нейросеть от CAMB.AI, способная клонировать голос на более чем 140 языках. Это одна из самых многоязычных моделей среди аналогов. Ключевая особенность MARS5 — способность сохранять интонацию и эмоциональную окраску оригинального голоса при клонировании.
MARS5 поддерживает русский язык и автоматически генерирует субтитры на языках, на которые выполняется перевод. Эта функция значительно упрощает локализацию контента, делая его доступным для широкой многоязычной аудитории. Субтитры создаются синхронно с переводом, что делает процесс удобным и быстрым при работе с видеоконтентом.
Кроме того, MARS5 умеет подстраивать липсинг — синхронизацию движений губ с новыми репликами на другом языке. Эта функция помогает сделать дубляж более естественным, так что речь персонажей совпадает с их визуальной артикуляцией, создавая целостное восприятие.
Хотя нейросеть работает довольно точно, она иногда допускает ошибки в ударениях, (чаще всего это касается имён собственных). Эти неточности случаются редко и не оказывают серьёзного влияния на общую работу системы.
Нейросеть доступна для локальной установки через GitHub (ссылка: MARS5 на GitHub) или для онлайн использования бесплатно на сайте CAMB.AI.
MARS5 может стать полезной для дубляжа видео, создания голосовых помощников или перевода контента на разные языки.
______________________________________