Сделал бесплатную программу, которая дублирует видео на другой язык голосом оригинала с помощью ИИ — локально, без облака⁠⁠

Dub Studio — опенсорсный «CapCut для ИИ-дубляжа»: берёт любое короткое видео и переозвучивает его на другой язык — полностью локально и бесплатно, без облака и подписок. Авто-анализ делает первый проход (распознавание речи, разделение спикеров, перевод, чтение текста на экране), а дальше ты в живом редакторе с превью правишь каждую реплику, голос, субтитр, плашку и заголовок.

Изначально это была версия на Python — а теперь я полностью переписал её с нуля на нативный стек (Rust + Tauri + C++/CUDA-движки).

• 5 режимов: полный дубляж · закадровый (голос поверх приглушённого оригинала) · только субтитры · Funny-режим (Gemma переписывает сценарий и переозвучивает) · транскрипт+диаризация

• Клон голоса оригинала (движок Higgs Audio v3), авто-кастинг разных голосов по спикерам или голос из пака

• Мультиспикерная диаризация (NVIDIA Sortformer, до 4 голосов) — каждому спикеру свой голос

• Текст на экране распознаётся (PP-OCR) и локализуется прямо на кадре — блюр оригинала + свой заголовок в подобранном стиле

• Импорт готовых субтитров (SRT/ASS) — берём текст и тайминг из файла вместо распознавания; галочка «уже на языке перевода» → дубляж напрямую из них, без ASR и перевода

• Мультиязычный экспорт — одно видео сразу на несколько языков, каждый наследует все твои правки

• Выбор ASR-движка — Parakeet-TDT (GPU) или Whisper (можно на CPU), с выбором размера модели и кванта

• 26 стилей субтитров (караоке / по словам / hormozi / неон…), рендер прямо на твоём кадре в реальном времени

• Сохранение проектов, поиск по сотням голосов и 100+ языкам, batch-обработка папок, живое превью ~0.17 с/кадр

• 100% оффлайн — ничего не уходит в облако

Скачать на GitHub — и поставить ⭐
README на русском языке
Сайт с примерами «до / после»

Мой Телеграм канал 👾 РЕПАКИ И ПОРТАТИВКИ ПОЛЕЗНЫХ НЕЙРОСЕТЕЙ ● НЕЙРОСОФТ