CEPBEJIAT1

На Пикабу
Дата рождения: 5 июня
13 рейтинг 1 подписчик 0 подписок 5 постов 0 в горячем
Награды:
5 лет на Пикабу
6

Нейроклип Баллада о Скуфе. Первый клип с дипфейком

Была у меня задумка сделать сказочный клип в стиле властелина колец.
Что-то в таком духе:

- Мама, давай сходим на Властелина Колец.
- У нас есть Властелин Колец дома...

Набросал сюжет, к слову, песня у меня уже была, и это было не сложно.
Пришло время придумывать персонажей. И тут мне в голову пришла мысль,
а почему бы мне не сделать главного персонажа с лицом моего друга,
он очень похож на задуманного героя визуально.
Сказано - сделано.

Фоток с тусовок и кооперативов у меня было достаточно, поэтому похитить лицо было не сложно) Разрешение тоже получил)

Сложность началась с поиском хорошего сервиса по смени лиц.
Сначала пробовал сразу через нейронку, получалось нечто страшное, как в фильме Нечто..
Совсем отчаялся, но наткнулся на неплохую сеть Fabula AI.
Было решено генерировать промт и картинки в Kling, а потом менять лица через Фабулу.
Промты доходили до 5 абзацев, каждый отвечал за свою сущность.
Например: Персонаж 1 / Персонаж 2 / Действия персонажей / Окружение, описание мира вокруг / Стиль, в котором генерируем.

Вот что вышло:

Процесс создания перса от первого промта до последнего

Далее пошла фаза генерации видео ряда. Делал в Hailuo Ai. Так как в клипе появилась,
какая-никакая режиссура, то референсов пришлось делать очень много.

Все еще трудно составить промт, чтобы нейронка поняла весь мой великий замысел Хичкока. )
Но терпение и труд все перетрут, пару вечеров, точнее дофига вечеров и вот...

Результат ниже

Показать полностью 7 1
3

Нейро клип на песню "Фотон"

Все привет! Расскажу пару слов, как создавал свой новый клип.

Началось все с посиделки у друга. Душевно так посидели, и вот батя друга рассказал, что у него есть песня, которую он написал еще в юности. К сожалению, он смог напеть только куплет и припев. Мне понравился этот кусочек текста, я решил дописать песню и оживить ее через нейросеть.
Песня получилась, длиннее моих прошлых работ, а следовательно футажей нужно было готовить гораздо больше.

Придумал визуальный стиль. Так как песня была написана еще в СССР, ну, первая ее часть. Почему, то в голову пришло, что это должен быть пиксель арт. Сгенерировал уйму картинок, вот некоторые из них

Фатализм и красота)

Но для меня было открытие, что великолепный пиксель арт, при генерации видео, превращался, или в кашу, или переставал быть пиксельным. Перепробовал кучу нейронок. Все выглядело не так.
И тут появилась новость, что Runway запустила новый алгоритм GEN - 3. Вот она и справился неплохо. В работе, сервис менее гибкий, чем аналоги, нельзя указать степень креативности, негативный промт.

Вот, что получилось. Надеюсь, понравится.

Показать полностью 13 1
7

Как я создаю клипы в нейросетях

Сегодня хочу пару слов рассказать, как происходит создание клипа. От выбора песни – создание сценария – создание персонажей – ну и монтаж. Вот какие шаги я выделил:

1) Выбираю песню, конечно же из своих психоделических. Которые уже до этого насочинял.

2) Выдумываю идею, концепцию клипа. Что будет в нем показываться?

3) Дальше я раскручиваю концепцию до некого сценария для клипа, сильно сложные задумки пока не реализую, нужно руку наметать.

4) Для меня важно определить цвет ролика, какие цвета преобладают. Цвета хорошо передают атмосферу и настроение.

Пример цветовой палитры

5) Генерация персонажей. Тут я начинаю экспериментировать с промтами и искать образы, которые +- есть уже в голове. В промте стараюсь подробно описать внешний вид героя, возраст, пол, одежду, черты. Нейронка понимает не сразу, приходится многократно менять промт. Иногда доходит до 4 абзацев.

В итоге получаем из этого уже вот такую вот девушку ящерку. Приятнее, чем первоначальный вариант.

6) Фотошопение получившихся картинок. Не всегда у нейросети выходит все складно, нейронка плохо работает с руками, ростом персонажей. Какие-то мелочи приходится править.

7) Генерирую ролики по 5 секунд. Сейчас появилась возможность делать по 10. Вот это уже интереснее.

8) Собираю получившегося Франкенштейна в видеоредакторе.

9) Если каких-то блоков не хватает, доделываю их.

В итоге получаю такие вот клипы.

Само собой делаю это я для души, так повеселить друзей.
Нахожу эти нейросети крайне занятными. Думаю, через пару лет можно будет грузить целые сценарии и получать фильмы)

Мои треки в ВК
Мои треки на Я музыке
Канал Youtube
Канал в ТГ

Показать полностью 7 2
1

Первые пробы создать видео-клип в нейронке Kling AI

Где-то два месяца назад открыл для себя SUNO AI. С того момента клепаю там песенки всякие своего сочинения в обработке нейронки.

Само собой, хочется как то еще больше оживить ту лабуду, которую я выдумываю. И вот на глаза попала новость, что нейронка Kling AI

вышла из бета теста в релиз. Да и видел я на что она способна. Поэтому стало интересно попробовать сделать простенький клипчик на веселую песню.

Что вышло, можно посмотреть ниже. А пока несколько выводов:

  1. В теории, если купить платную версию и потратить дня 3-5, можно сделать полноценный клип

  2. У нейронки пока очень плохо с движениями, если какие то мелкие части, как пальцы, рот, волосы она еще +- может оживлять, то с полноценной сценой движения или танца, никак.

    У меня получалось ужасное месиво из плоти, которое будет преследовать меня еще несколько ночей, точно.

  3. Генерировать лучше из картинки, если писать сразу промт для видео получается значительно хуже.

  4. Нейронка не идеальна, оно и понятно, релиз только. Но потенциал уже чувствуется огромный.

    Спасибо, кто прочитал и посмотрел, и осудил

Показать полностью 1
8

Хоббит, или Туда и обратно. Комикс из детства

Тот самый комикс из детства, потрепан временем и моими детьми

Немного истории, думаю, рассказывать, кто такой Дж.Р.Р. Толкин нет смысла, лучше упомяну художника этого сногсшибательного произведения.

Хоббит, или Туда и обратно. Комикс из детства Хоббит, Толкин, Властелин колец, Ретро-обзор, Комиксы, Длиннопост

Дэвид Вензел — американский комиксист, художник и иллюстратор детских книг. Известен не только работой над «Хоббитом», но и своим участием в создании комиксов Marvel «Мстители» и «Дикий меч Конана».

Сам же графический роман прекрасен, как дополнение к оригиналу, так и как самостоятельное произведение. В нем точно переданы все события, ничего не упущено, и большая часть диалогов осталась на месте. В США комикс издавался в трех выпусках, а затем был выпущен в виде сборника.

Обложки комикса 1993 и 2015 года.

В России, комикс издали в 1993 году, что по современным меркам не так уж и долго. Позже переиздали в 2015 году, как раз к выходу последнего фильма Питера Джексона в кино.

Интересный факт, обложка Русского издания из 1993 года, выполнена не автором комикса, а русским художником.

Можно много говорить о качестве иллюстраций, но лучше увидеть самому.
Ниже приложил ссылку на диск с комиксом, отрыл на просторах интернета.

Комикс на облачном диске

Ссылка на Ретровейв канал, который веду с другом.
Постим там ретро контент.
Если интересно, заходите

Показать полностью 9
Отличная работа, все прочитано!