wonderlove

Корпорация Meta* анонсировала нейронные сети Emu Video и Emu Edit — инструменты на основе генеративного искусственного интеллекта для редактирования и создания контента.

Оба инструмента все еще находятся на стадии тестирования. Согласно заявлению, продукты уже демонстрируют потенциальную пользу для художников, аниматоров и других специалистов творческого направления.

Нейросеть обучалась в два этапа, что позволило инструменту реагировать на различные входные данные: «Сначала Emu Video создает изображения с учетом текстового запроса, а затем на его основе генерирует видео. Этот разделенный подход к генерации позволяет нам эффективно обучать модели для видеороликов», — объяснили в Meta*.

Emu Video способен генерировать видеоклипы на основе введенного текста и прикрепленных изображений в формате 512×512 с частотой 16 кадров в секунду.

Emu Edit позволяет удалять или добавлять фон на фото, выполнять преобразования цвета и геометрии, а также поддерживает локальное и глобальное редактирование.

ИИ обучен на наборе данных из 10 млн образцов, каждый из которых имеет входной вариант изображения и описание задачи, а также целевой результат.

Напомним, в августе корпорация анонсировала нейросеть AudioCraft, которая создает звуки и музыку по текстовому описанию. Про неё и то, как генерировать музыку с помощью ИИ, можете почитать в моей статье.

Страница проекта

* - запрещённая в России организация.

Больше о нейросетях в источнике - Арт-нейросети от Nerual Dreming💫

В левой части непосредственно видео(сэмпл), справа история подобранных сэмплов. Красная кнопка внизу - следующая композиция. Если ничего не настраивать, то ИИ будет подбирать всевозможные сэмплы, но можно настроить поиск под наши предпочтения с помощью фильтров, рассмотрим их подробнее:

Довольно много фильтров и параметров, начнём по порядку, самое простое - подбор по жанрам, выбираем из предложенных ниже:

Так же есть тумблер "Подбирать выбранные жанры точно", как мне кажется он просто будет подбирать такие сэмплы, которые больше подходят под выбранный(-е) жанр(-ы).

Следующая вкладка - стили, и здесь их о-о-очень много: от баллады и брейкбита до диско и евродэнса(даже музыка из барбершопов есть)

Следующий параметр прост и понятен - страна происхождения

Как минимум уже за ТАКОЕ количество функций подбора сэмплов сервис отправляется в мой личный топ нейросетей для работы со звуком, он ещё и бесплатен, а мы идём далее.

А дальше всем давно привычные параметры: Key(тональность), Tempo(темп, bpm), Views(количество просмотров), Year(Год создания/публикации), за исключением Vocality(как написано в самом сервисе, это параметр, "предсказывающий, будет ли вокал в треке", но я пока не до конца понял, как он работает)

Так же есть вкладка дополнительных настроек плеера, но думаю здесь всё довольно просто.

Итак, представим, что я ищу сэмпл для Лоу-Фая, я выставил вот такие параметры:

Спустя буквально пару попыток, я нашёл более-менее подходящий сэмпл, вот как он звучит:

Далее я скачал сэмпл с помощью Y2mate уже сразу в Mp3. Попробовал накидать демку трека, вот что вышло:

Ну и пока рендерился мой проект, я нашёл ещё интересный эмбиент сэмпл, берите и используйте!

Вот такой получился гайд, жду ваши комментарии и результаты использования!

Больше подобных статей в моём сообществе - Создание Музыки 🎧

Интересна тема генерации музыки с помощью нейросетей? Добро пожаловать в Нейро-Звук🔉

Понравилось? Тогда милости прошу в мой телеграм канал, буду ждать тебя там!🔥