Ответ на пост «Deepfake от мира музыки - меняем голос за пару кликов (плюс portable версия)»1
Небольшой пост для понимания как выглядит на практике смена голосов
Небольшой пост для понимания как выглядит на практике смена голосов
RVC-GUI позволяет очень легко изменить голос на голос из заранее обученной модели, например музыканта, актера, известного деятеля или и вовсе вашего приятеля (при наличии соответствующей модели). Но данный скрипт не имеет в себе функции обучения моделей, да и, к тому же, этот процесс может показаться сложноватым для обычного человека, не знакомого с нейросетями.
Процесс замены голоса происходит так:
1) Выбираем аудиофайл с голосом, который будем менять. Важно чтобы в дорожке не было музыки и посторонних звуков. Удалить звук можно различными онлайн-сервисами, лично я пользовался vocalremover
2) Импортируем предварительно обученную модель в формате zip файла.
Модели англоязычных музыкантов можно найти тут: Huggingface
Выбираете модель с припиской (RVC) или (RVC-2), качаете zip файл и затем импортируете в нашу программу.
Или же в Дискорд сервере AiHub в канале Voice-Models
2) Выбираем модель в списке моделей
3) Выбираем метод преобразования голоса. Все они отличаются по качеству и скорости, рекомендую использовать harvest
4) Выбираем Тон (опционально)
5) Выбираем Выбор ускорения. Если у вас видеокарта от Nvidia - выбирайте GPU. Если же нет - то CPU.
6) Жмем конвертировать. Обработанный файл будет находиться в той же папке, где и оригинал.
Официальную версию можно скачать можно на Github
Я же подготовил portable версию, не требующую установку python, ffmpeg и прохождения процесса установки библиотек. Кроме этого она полностью переведена на русский язык.
Запуск: вам нужно лишь распаковать архив и запустить START.bat
Cкачать можно на Яндекс Диске.
Будущие обновления будут выходить у меня в Телеграм канале, там же можно найти и другие сборки нейросетей, а также просто задать вопросы по интересующим проблемам.
Господа, я хз как сделать вроде бы простейшую вещь. Есть больше сотни записанных фрагментов голоса. Нужно их подшаманить всякими там компрессорами, де-эссерами и вот этими всеми эквалайзерами. Но я прям вообще не алё, максимально не эксперт.
Как (и главное в чём) можно закинуть все записанные куски в один проект, нашаманить там всяких VST колдунств и потом разом все это сохранить точно так же в отдельные файлы? Наверняка же можно. Я свихнусь по отдельности такую кучу перебирать.
Доброго дня люди добрые! Моё имя - Николай. К вам я с вопросом захожу, сам я диктор и в обработке закадра а уж тем более дубляжа (или его подобия) ничего не смыслю. Работаю в audition и soundforge.
Собственно, сам вопрос. Посоветуйте плагины которые по вашему профессиональному мнению подойдут для обработки "кинозвука". Пользовался стандартными, получается совершенно не то что есть в оригинальной дорожке.
Скажу сразу что звук слишком стерильный у меня выходит на записи, возможно из-за этого сложно работать с ним на постобработке. Буду рад любому совету.
Привет, Пикабу!
Нужен твой совет.
Дано: коллекция аудио-книг передачи "Модель для сборки", записанных ещё с радиопередач.
Во многих хороших книгах/рассказах звук так себе - дисбаланс лево/право, скачет громкость, музыка порой громче голоса, помехи.
Хочу сделать ремастеринг некоторых аудио-книг.
Вопрос: какой сейчас есть софт для обработки звука?
Не очень перегруженный (Sony Vegas для этой задачи, как мне кажется - оверкилл), но достаточно функциональный.
Платный/бесплатный - роли не играет.
Спасибо!
Открыл для себя интересный опыт. Компания iZotope, в сфере реставрации звука, достойно занимает первое место. Я, как увлечённые человек, в это, своего рода ремесло, ушёл с головой и открыл интересный алгоритм подавления шума при помощи инвертированной фазы сигнала. Дело в том, что в iZotope RX, я использую 5-ю версию, сам модуль De-Noiser, имеет хорошую функцию, при которой мы можем прослушивать, что попадает в детектор кроме шума, нажав галочку на (Output noise only). То есть, поставив галочку, мы слышим только шум, который будем удалять. И когда я себя, казалось бы, исчерпал, в плане экспериментов со звуком, однажды пришла мысль - для более точного удаления шума, мне нужен точный идентичный шум, такой же, какой присутствует в обрабатываемом материале...и О Эврика! Я пустил две дорожки через хост PatchWork от Blue Cat, на первой повесил De-Noiser, предварительно сделав отпечаток (слепок) шума (Learn) и поставил галочку на Output Noise Only и получаю только шум, на второй дорожке проходит сырой сигнал, как есть вместе с шумом, нажимаю кнопку инверсии фазы любой из дорожек и вот эффект! Шум в композиции, наложенный на шум с денойзера при включенной инверсии фазы вычитает шум из композиции. Но есть небольшой нюанс, так сказать вишенка на торте.. Это важно!!! посредством ручки громкости в денойзере (увеличением), регулируется удаление шума в ноль! P.S. Но , всё зависит от материала, так сказать загаженности полезного сигнала. Но, этот опыт показал, что такое удаление шума эффективнее штатного подхода. Ссылка на видео с моего канала, надеюсь будет интересно!