Чекпоинты для Stable Diffusion. Пиксель арт, комиксы, реализм(примеры)⁠⁠

Без лишней воды.

Пару недель назад полистал реддит и интернет на счёт интересных чекпоинтов. Ниже что нашёл и заинтересовало. Примеры сгенерированы, в основном, на Euler A 50, без негативных запросов, просто по шаблону - женщина/машина/кот/город, плюс что требует промпт для активации.

-------

ComplexLA Style

Промпт: требует "ComplexLA Style" в начале.

Где брать: https://huggingface.co/Conflictx/Complex-Lineart

Примеры:

Рисует в стиле фантастических иллюстраций, не совсем понятно, правда, чьих. Не очень хочет рисовать котов и скатывается в рисование всяческих конструкций, хотя котообразное пятно один раз выдал.

Автор рекомендует использовать в разрешении больше 512x512, что чревато появлением мутантов, если без хайрез фикса, а с фиксом будет медленно. Не могу сказать, что дико зацепило, думал, что будет интереснее.

--------------------

"All In One Pixel Model"

Промпт: "16bitscene" или же "pixelsprite" вначале

Где брать: https://huggingface.co/PublicPrompts/All-In-One-Pixel-Model

Примеры:

Здесь у нас "2 в одном". Рисует спрайты и пейзажи. В зависимости от выбранного стиля. При попытке нарисовать кота как пейзаж, сопротивляется и рисует комнату без кота. Вроде бы не очень может изометрию и не всегда.

Спрайты не идеальные, надо доводить руками.

--------

"16 bit landscapes"

Промпт: нужно добавлять "in 16-bit-landscape pixel art style" в конце запроса. Не очень удобно.

Где брать: https://huggingface.co/PublicPrompts/16-bit-landscape_PublicPrompts

Примеры:

Про эту модель нигде ничего нет, но оно рисует довольно неплохой высокодетализированный пиксель арт (или стилизацию под него), который напоминает не то заставку с лодкой, что была на Денди, то ли "Легенды Кирандии", космический квест и им подобные. Можно клепать довольно симпатичных околомультяшных пикселизованных девушек, например, вот таких:

Похоже на 256 цветную графику времён vga 13h, который 320x200. Что-то в этом есть.

----------

Dreamlike Photoreal

Промпт: "Modelshoot style" в начале.

Где брать: https://huggingface.co/dreamlike-art/dreamlike-photoreal-2.0

Примеры:

Фотореалистичная модель, которую затачивали на 768x768 и портреты людей. 512x512 оно может, но хуже. Чуть-чуть хуже. Совсем чуть-чуть хуже.

Есть два момента:
Разрабатывающие её товарищи впендюрили кустарную лицензию (и вопрос - "а так можно было?"), которая накладывает ряд ограничений, а конкретно:

• You are not allowed to host, finetune, or do inference with the model or its derivatives on websites/apps/etc. If you want to, please email us at contact@dreamlike.art

• You are free to host the model card and files (Without any actual inference or finetuning) on both commercial and non-commercial websites/apps/etc. Please state the full model name (Dreamlike Photoreal 2.0) and include the license as well as a link to the model card (https://huggingface.co/dreamlike-art/dreamlike-photoreal-2.0)

• You are free to use the outputs (images) of the model for commercial purposes in teams of 10 or less

• If you are using the model or its derivatives through a website/app/etc. in breach of this license, you are not allowed to use the outputs of the model or the outputs of the model's derivatives in any way, both commercial and non-commercial.

Т.е. русским языком: хостить модель нельзя, коммерческое использования в командах больше 10 человек нельзя, если модель использована через сайт картинки использовать нельзя.

Мутят фигню. Хотят сделать свой собственный саас, и сидеть на нём. Понятно, но неприятно. С другой стороны, ну что они нам в текущей ситуации сделают?

Есть ещё подозрение что товарищи придерживались идей "diversity", что влияет на результат. на практике это выражается в том, что может потребоваться в запрос указать требуемую расу или же лепить в негативный запрос запрет на генерацию определённых рас.

А, и обнажёнку оно умеет и старательно производит. В ридми указано "модель озабоченная, осторожно!".

------

Protogen

Промпт: ничего не надо, так работает.

Где брать:
https://huggingface.co/darkstorm2150/Protogen_v2.2_Official_Release для версии 2.3 и https://civitai.com/models/3666/protogen-x34-photorealism-official-release для версии 3.4

Примеры:

Версия 2.2

Версия 3.4:

Модель заточенная на реализм. Что 2.2, что 3.4.

Уж не знаю, почему оно генерит женщин с серьёзным, суровым, полным решимости лицом, которые выглядят, как будто они вот прямо сейчас собрались идти и душить королеву ксеноморфов голыми руками и им это ещё и не впервой.

Решается добавлением модификаторов вроде "young"|"beautiful" и там будет всё нормально:

Ну или вот так:

(О, даже пальцев приемлемое количество).

Насколько понял, 2.2 это у нас термоядерная смесь из кучи моделей вроде hassan's blends, f222 (о которых товарищи, что постят нейросетевую эротику на пикабу, однозначно знают), а 3.4 у нас похожий коктейль, но ещё и с добавлением упора на реализм. Вроде где-то аниме версия пробегала....

Оба варианта могут генерировать качественные рисунки и не стесняются обнажёнки. Можно выбить и порно, но там будет шанс словить лавкрафтовщину с шансом потери очков рассудка.

Есть также тенденция генерить похожее или даже одно и то же лицо, что можно наблюдать на картинке "young beautiful" девушки выше. Той, которая не вампир с бокалом. Так понимаю, этим страдают все производные от Hassan's Blend. Вот кто это - непонятно.

-------

И на этом всё.

Вот как-то так вот. Развлекайтесь.

P.S. ---небольшое дополнение по протогену---

Поковырявшись в сети, выяснилось, что автор Protogen намешал аж 8 вариантов разных чекпоинтов. Все они доступны вот тут:
https://civitai.com/user/darkstorm2150

На данный момент существуют, Protogen 2.2 (аниме) Protogen x3.4(реализм), которые я упомянул. В дополнение к ним были сделаны Protogen x5.8(Scifi+Anime), Protogen x5.3(фотореализм), Protogen Eclipse (продвинутый), Protogen Dragon, Protogen Infinity и Protogen Nova.

Но есть неприятный момент. Автор миксов забил на лицензии не то что болт, а прям сразу железнодорожный рельс, и, в общем, в версии 2.2 лицензия обычная, в 3.4 добавляется лицензия seek art(вроде бы нормальные), а во всех остальных тот самый dreamlike о котором я упоминал, где всё запрещено, и за каждый чих надо у компании спрашивать разрешения.

Как бы, в наших краях популярно йохохо и вряд ли что за это будет, но на зарубежных же сайтах идёт небольшой бухтёж на эту тему, особенно дримлайк. Вроде как эти чекпоинты как бы и использовать нельзя, но вроде как их требования нелегальны, и в суде не прокатят. Что с этим всем будет - непонятно. Сам автор написал что спросит у компаний разрешения, и если что не так - грохнет модели, но это было 10 дней назад и он, возможно забыл или "забыл" об этом.

------

Вот как-то так вот.