Ответ на пост «Обложка, нейросеть и прочее»⁠⁠2

Теперь как то же самое можно сделать проще.

Здесь рассматривается работа с локально установленной нейросетью. Для неё нужна видеокарта с 6+ (лучше больше, 8+) гигабайтами памяти. Всё то же самое можно сделать через веб-сайт с работающей stable diffusion img2img. Где-то он был.

-------

Берём, например, stable diffuion от automatic1111:

https://github.com/AUTOMATIC1111/stable-diffusion-webui

Устанавливаем. Запускаем, идём вы браузере на localhost:7860

Берём исходную картинку, копируем в буфер обмена.

(Взято с поста: @VictoriaLu, Обложка, нейросеть и прочее )

Идём на вкладку img2img, втыкаем её туда через Ctrl+V или перетаскиванием. Жамкаем "interrogate", чтобы компьютер определил, что там вместо нас. Получается так:

"a drawing of a woman with blue eyes and a black shirt on, with a white background and a blue wing, by Elfriede Lohse-Wächtler"

В принципе, правильно, убираем хлам, и левого художника (by ELfriede...). Интеррогатор имеет привычку добавлять странных художников, и, например, почему-то думает, что пишущего Епифанцева нарисовал Квентин Тарантино. Убираем лишнее, добавляем художника в запрос. Например, так:

"a drawing of a woman with blue eyes and a black shirt on, with a white background and a blue wing, by Greg Rutkowski"

Далее, ставим следующие настройки:

Sampling Steps: 20

Sampling Method: k_euler_a

Batch Size: 1

Cfg Scale: 7

Denoising Strength: 0.5

Это настройки по умолчанию, кроме Denoising Strength. Denoising Strength определяет, как сильно нейросеть будет фантазировать. На практике, 0.3..0.4 - слабая ретушь. 0.5 - сохранит позу и, может быть, мелкую мимику. 0.6 и выше - начинает терять позу и фантазировать. 0.75 - будет фантазия на тему, слабо связанная с оригиналом. При низком значении Denoising Strength, можно задрать CFG Scale до 9 или даже 15, но увеличится шанс артефактов. Важно то, что низкие значения меньше меняют исходную картинку, но при этом артистический стиль будет намного более слабо выражен. Т.е. картинка может получиться хуже или менее интересной, если Denois Strength слабое.

Выглядят настройки так:

Если хотим несколько вариантов, задираем Batch Count, если хотим править лица, жамкаем "Restore Face", если картинка не квадратная, выбираем между Crop and Resize (обрежет длинные стороны и сделает квадрат, емнип) и Resize and Fill (растянет узкие стороны до квадрата, заполнит пикселями с границ).

Жмём "генерить", получается нечто вроде вот этого:

Пользоваться можно, но стиль выражен слабо. Это потому что у нас мало шагов (steps) - 20. Это как если бы мы художнику оригинал отдали на ретушь, дали ему проработать 2 минуты, а потом выперли и отобрали работу. Поднимаем до 50, получится что-то в духе этого:

Появился стиль, но оно всё ещё сильно опирается на оригинал и слабо похоже на рутковского. Поднимаем Denoising Strength до 0.65. Получится похоже на оригинал, но теперь будет больше свободы. И можем получить что-то в таком духе:

Стиль есть, позу потеряли.

Если нравится конкретное лицо, но хочется поиграться с параметрами, под картинкой ищем "Seed" и копируем цифровое значение в настройки слева. Лицо каждый раз будет одно и то же.

Для более цветной картинки делаем более цветное пятно любым способом, либо задираем Denoise Strength до 0.75, но тогда нейросеть начнёт фантазировать/фонтанировать на тему.

Рекомендуется генерировать несколько вариантов за раз, т.к. лица будут разные, и какое-то одно может понравиться больше. Пробуем.

Куда-то движемся, но он очень хочет рисовать рубашку. Убираем "black shirt", заменяем "wing" на "wings". Результат:

Ну и дальше играемся с параметрами до победного конца. Denoise выше/ниже (свободы больше/меньше), докидываем модификаторов или переделываем стартовый набросок.