14

Создание видео в Stable Diffution

Ну, в принципе, очередной пост о том что в Stable Diffution можно делать видео, и что такие видео пока что сильно страдают от того что кадры не связаны друг с другом.

Вот нашел я видосик на Реддите с шуточкой типа "Когда Дикаприо приходится встречаться с Джиджи Хадид (возраст 27 лет) чтобы доказать что он не встречается только с девушками моложе 25", и стал этот видеосик очередной жертвой адептов нейронной сети

Казалось бы еще один видосик. Но если вы любите читать теги...

Да ладно уж. Сделал я "плагинчик" который с помощью ffmpeg напрямую кормит нейросеть кадрами из видео, и напрямую же обработанные кадры сразу записывает в видео.

А то раньше, в основном, приходилось разбивать видео на картинки, а потом обратно собирать видео из полученных картинок.

"Плагин" к версии Web-UI от гражданина с никнеймом AUTOMATIC

Положить в папку Scripts.

Сам плагин на данный момент можно забрать тут , может потом перекину его в отдельный репозиторий.

Лично я рекомендую просто забирать только этот отдельный файлик, а то я тот еще пидарас не работаю программистом и имею в таких вещах не так уж много опыта, так что сам репозиторий с Web-UI я не смогу поддерживать в актуальном состоянии (а там каждый день добавляют новые плюшки), так что лучше тянуть его у самого автора.

Для работы этому "плагину" нужен FFMPEG, который должен быть либо где-то среди папок из PATH (если вы в курсе что это), либо его кинуть в основную папку Web-UI

Создание видео в Stable Diffution Stable Diffusion, Нейронные сети, Я сделяль, Программирование, Видео, Длиннопост

Оно еще сыроватое и ломается от малейшего шороха загребущих юзеров.


P.S. Напомню, что чтобы в принципе запустить Stable Diffusion на своем железе через этот Web-UI вам нужна видеокарта с 4++ Gb видеопамяти, причем очень желательно зеленая и поновее.

Правила сообщества

ВНИМАНИЕ! В сообществе запрещена публикация генеративного контента без детального описания промтов и процесса получения публикуемого результата.


Разрешено:


- Делиться вопросами, мыслями, гипотезами, юмором на эту тему.

- Делиться статьями, понятными большинству аудитории Пикабу.

- Делиться опытом создания моделей машинного обучения.

- Рассказывать, как работает та или иная фиговина в анализе данных.

- Век жить, век учиться.


Запрещено:


I) Невостребованный контент

  I.1) Создавать контент, сложный для понимания. Такие посты уйдут в минуса лишь потому, что большинству неинтересно пробрасывать градиенты в каждом тензоре реккурентной сетки с AdaGrad оптимизатором.

  I.2) Создавать контент на "олбанском языке" / нарочно игнорируя правила РЯ даже в шутку. Это ведет к нечитаемости контента.

  I.3) Добавлять посты, которые содержат лишь генеративный контент или нейросетевой Арт без какой-то дополнительной полезной или интересной информации по теме, без промтов или описания методик создания и т.д.


II) Нетематический контент

  II.1) Создавать контент, несвязанный с Data Science, математикой, программированием.

  II.2) Создавать контент, входящий в противоречие существующей базе теорем математики. Например, "Земля плоская" или "Любое действительное число представимо в виде дроби двух целых".

  II.3) Создавать контент, входящий в противоречие с правилами Пикабу.


III) Непотребный контент

  III.1) Эротика, порнография (даже с NSFW).

  III.2) Жесть.


За нарушение I - предупреждение

За нарушение II - предупреждение и перемещение поста в общую ленту

За нарушение III - бан