Карлсон, который живет на крыше… и стиль стимпанк⁠⁠

Мне это удалось!

Нейросети не смогли нарисовать Карлсона.
Навыки распознавания и генерирования нейросетей не смогли осилить задачу по рисовке персонажа детской сказки Астрид Линдгрен Карлсона. Вместо привычного глазу "мужчины в самом расцвете сил" с пропеллером за спиной нейросети выдали серию абсурдных вариаций...
Эксперты объясняют этот конфуз тем, что искусственному интеллекту неочевидна концепция мужчины с прикрепленным к спине пропеллером. Т.е. такого персонажа нейросеть не знает, а потому генерирует как бог на душу положит.

Сгенерировать Карлсона было сложно. Его нейросети вообще плохо понимают. А со стимпанком - вообще не срастается. Либо Карлсон без стимпанка, либо стимпанк, но на Карлсона вообще не похоже. Впрочем, кое-что интересное, всё же получилось.

Сперва попробовала сгенерировать его в Midjourney. Запрос, как обычно в Midjourney, простой: «Карлсон, который живет на крыше, в стиле стимпанк»
«Carlson Who Lives on the Roof, steampunk style»

Результат довольно странный, и не соответствующий замыслу. Похоже, персонаж Карлсон нейросети не знаком. Добавила более подробное описание:

"Карлсон, который живет на крыше, низенький толстяк с рыжими короткими волосами, штаны на лямках и пропеллер за спиной, как у маленького вертолета, дизайн персонажа в стиле стимпанк"

"Carlson who lives on the roof, a low fat man with red short hair, strappy pants and a propeller behind his back like a small helicopter, steampunk style character design"

Получилось такое:

Чтобы добиться большего сходства, промпт пришлось немного усложнить, добавить уточнений:

«Карлсон, который живет на крыше, низенький забавный толстяк с рыжими короткими волосами, штаны на лямках и пропеллер за спиной, как у маленького вертолета, дизайн персонажа в стиле стимпанк --нет бороды, усов»

"Carlson Who Lives on the Roof, a low, funny fat guy with red short hair, strappy pants and a propeller behind his back like a small helicopter, steampunk style character design --no beard, mustache"

... а заодно, «познакомить» нейросеть с Карлсоном с помощью референса, найдя в сети подходящую картинку. Результаты уже ближе к замыслу. Заметьте, нейросеть не копирует ни стиль, ни композицию, ни внешность персонажа из референса, просто заимствует какие-то отдельные моменты, общее настроение, видимо.

---

Несмотря на определенную изюминку полученных результатов, они меня не удовлетворили, так как я не вижу в них запрошенного стиля стимпанк. Я решила попробовать другую нейросеть – Stable Diffusion.  Модель SDXL. Промпт пришлось соответственно переработать:

«a funny, jolly, young, fat, short man named Carlson, red hair, plaid shirt, strappy pants, who lives on the roof, flying through the air with a propeller attached to his back, steampunk style»

"смешной, веселый, молодой, толстый, невысокий человек по имени Карлсон, рыжие волосы, клетчатая рубашка, брюки на бретельках, который живет на крыше и летает по воздуху с пропеллером, прикрепленным к его спине, в стиле стимпанк".

Результаты оказались гораздо интереснее! Некоторые вполне соответствуют характеру персонажа, как я его себе представляю, вспоминая книгу Астрид Линдгрен. И, хотя на рисунках по-прежнему отсутствует пропеллер, полученный персонаж похож на прототип и внешне, и по характеру, и уверенно держится в воздухе.

Результаты стали радовать! Теперь и Карлсон вполне симпатичный, и стиль стимпанк просматривается, как в аксессуарах персонажа, так и в окружении. Только пропеллер всё же пришлось генерировать отдельно и совмещать с основным изображением, применяя нейросетевые инструменты и фотошоп.

---

Продолжила «прокручивать» генерации в SDXL, чтобы добиться большего соответствия замыслу. После нескольких "круток генерации" наконец-то появился настоящий Карлсон с пропеллером и в заданном стиле! Без референсов и фотошопа!

Теперь я вполне довольна результатом и считаю задачу выполненной.

Это было сложно, но интересно и весело!

Итоговый промпт:
«a funny, jolly, young, fat, short man named Carlson, red hair, plaid shirt, strappy pants, who lives on the roof, flying through the air with a propeller attached to his back, frameless fan, rotating fan blades, against the sky, steampunk style / смешной, веселый, молодой, полный, невысокий человек по имени Карлсон, рыжие волосы, клетчатая рубашка, брюки на бретельках, который живет на крыше, летает по воздуху с пропеллером, прикрепленным к его спине, бескаркасный вентилятор, вращающиеся лопасти вентилятора, на фоне неба, в стиле стимпанк»

Автор: pikabu.ru/@LuckySweet001
Больше моих работ: t.me/LuckySweet001