Пылающий Джокер! Анимация и музыка сгенерированы нейросетью!
Для генерации музыки использовался AudioCraft, для генерации анимации VisionCrafter.
Интересно как создаются такие вещи? Подписывайтесь на мои телеграм каналы и научитесь.
Для генерации музыки использовался AudioCraft, для генерации анимации VisionCrafter.
Интересно как создаются такие вещи? Подписывайтесь на мои телеграм каналы и научитесь.
Нейро-Цой поет кавер на песню «Вечно молодой», группы «Смысловые галлюцинации».
Хорошего всем настроения.
Который в свою очередь сочинил и исполнил песню в стиле The Beatles.
А на бэк-вокале у него тоже созданный на компьютере нейросетевой Пол Маккартни.
Просто проходите по ссылке и пишите в поле Describe your music теги, которые описывают желаемую вами музыку.
Вы так же можете загрузить аудио запись мелодии, которая будет использована в качестве основы для генерации.
Источник - 🔊Нейро-Звук
Возможно кто-то из вас помнит мой старый пост с первой версией AudioCraft: Audiocraft - нейросеть, создающая музыку по текстовому описанию либо заданной мелодии (portable версия в конце статьи)
AudioCraft Plus основан на самой свежей версии Audiocraft, но кроме этого расширяет ее функциональность, позволяя создавать уже не 30-ти секундные аудио-отрезки, а полноценные треки. Как всегда, я подготовил для вас портативную версию с запуском в 1 клик (ссылка будет в конце статьи). Оригинальный код проекта можно найти на официальной странице GitHub
Вот так выглядит интерфейс:
Для полноценной работы программы требуется видеокарта Nvidia, но, она должна работать и на процессоре, хоть и медленнее.
На первый взгляд, он может показаться сложным, но для упрощения понимания значений, вы можете открыть вкладку Wiki. В портативной версии, я перевел ее на русский.
Итак, программа позволяет создать музыку на основе:
Текстовой подсказки (prompt). Пишите на английском описание того, что бы вы хотели услышать (примеры можно посмотреть на картинке выше) и музыка будет генерироваться согласно этому описанию
На основе мелодии. Для этого во вкладке Audio загрузите файл с мелодией либо же можете использовать микрофон.
Мы с вами разберем пример генерации музыки на примере Prompt. Кто знаком со Stable Diffusion думаю, уже понял принцип работы:
В поле Input Text вводит наш prompt. Допустим, пусть это будет "Classic hard rock in the style of Metallica, rich guitar sound". Установим количество повторений 4, и выставим внизу значение Duration - 60 секунд. Тем самым мы задали продолжительность всего трека. Нажимаем Calculate Timings и вычисляем продолжительность отрезка.
Затем зайдите Settings и в Model выберите Модель которую вы хотите использовать. Если у вас больше 8 гигабайт видеопамяти, то выбирайте large, так как она даст лучшее звучание. Если у вас 6-8 - то выбирайте medium. Ну а если меньше 6 - то small.
В Output Audio Channels выберите Stereo Effect, а в Decoder - MultiBand_Diffusion. По моему мнению, это улучшает итоговое звучание. Но тут уже вы сами можете поиграться и выбрать то, что нравиться именно вам.
Теперь, когда все готово, нажимаем Generate и ждем.
Если вы хотите разнообразить звучание трека, то в таком случае вам необходимо:
В Prompts задать число отрезков, из которых будет состоять трек
Затем, в полях Input Text описать каждый отрывок и задать количество его повторений.
Установить длину трека через Duration
Нажать Calculate Timings, чтобы вычислить длину каждого отрезка.
Используя Overlap установить длительность в секундах для перекрытия одного отрезка другим.
Как я уже сказал, расширенные пояснения каждого из значений можно найти во вкладке Wiki.
Портативную версию AudioCraft Plus можно скачать с Яндекс Диска или с моего облака. Для ее запуска вам необходимо распаковать архив и запустить bat файл. В сборке уже идет small модель, остальные же будут скачаны самостоятельно при первом их запуске.
Ну а будущие обновления программы, а также портативные сборки других нейросетей, о которых я писал ранее, можно найти в моем Телеграм канале.
Все привет! Решил поделится. Я сделал нейросеть которая создает барабанные партии в MIDI формате. Пока что это бета версия.
Вот ссылка: Генеритм
Нейросеть создает MIDI файл. Его надо вставить в редактор типа Cubase или Reaper и подрубить плагин addictive drums 2 или bfd.
Одна вакансия, два кандидата. Сможете выбрать лучшего? И так пять раз.
Неожиданная коллаборация с американским джазовым трубачом Джеймсом Хиллом.
Ничто не предвещало такого поворота событий. Я просто написал рецензию на один из экспериментальных электронных альбомов знакомого по социальной сети Facebook музыканта. В том альбоме звучала совершенно божественная труба, от партий которой я прослезился, и стал искать в сети этого трубача, который словно Бог, способен вдохнуть душу во все созданное на Земле, и сделать это небесным.
К собственному удивлению я скоро получил комментарий от Джеймса Хилла к более ранней версии этого произведения. Джеймсу оно понравилось, и он хотел бы записать партию трубы для этой мелодии. И еще через сутки я уже слушал бета версию. Мне оставалось лишь сбалансировать микс, а тем временем Джеймс сделал видеоверсию.
Между прочим, существует еще одна версия от Джеймса — гораздо более свободная и джазовая. Она — с тем же видеорядом — представлена на Youtube-канале студии TCAB Studio Джеймса Хилла.
Друзья, я не могу слушать игру Джеймса без эмоций и слез. Уверен, Вас эти партии и вложенные в них чувства тоже не оставят равнодушными.
Огромное спасибо Джеймсу за сотрудничество и столь неожиданный сюрприз.
Music / Synthesizers byAndrey Klimkovsky
Trumpet and Video byJames Hill(withkaiber ai)
Recorded atTCAB Studioin 2023@tcabstudio