Гайд по написанию промтов для нейросети Stable Diffusion⁠⁠

В данном гайде мы рассмотрим, правильное написание промтов для нейросети Stable Diffusion. Промты, а точнее промпты, представляют собой текстовые запросы с детальным описанием объектов и сцен, которые вы хотите увидеть на изображениях. Мы также обсудим различия между простыми и более сложными промтами Stable Diffusion, чтобы обеспечить полное понимание этой темы.

Простые запросы могут выглядеть как «мужчина в парке» или «средневековая крепость». Однако, если формулировать такие запросы без дополнительных деталей, это может привести к не самым удачным результатам. Поэтому мы рассмотрим способы, которые помогут лучше контролировать результаты генерации. Нейросеть Stable Diffusion AI принимает запросы на создание изображений на любом языке. В этой статье мы обсудим, как правильно составлять запросы для Stable Diffusion на русском языке.

Написание промтов для нейросети Stable Diffusion - применение знаков препинания

Вот несколько легких советов, которые стоит иметь в виду при формировании запросов. Начните с указания ключевого объекта, который требуется изобразить, например, «жираф». После этого можно добавить другие детали, такие как одежда, фон или дополнительные персонажи, разделяя их запятыми. Например, «жираф в железной броне, с гиенами на заднем плане».

Если искусственный интеллект не учитывает некоторые из перечисленных вами токенов, вы можете выделить пропущенный элемент, поместив его в круглые скобки (), чтобы подчеркнуть его важность. К примеру, «жираф в (железной броне), с (гиенами) на заднем плане».

В данном примере фразы «железной броне» и «гиенами» помещены в круглые скобки, что указывает на их значимость, превышающую остальные элементы промпта на 10%. Этот подход информирует нейронную сеть о том, что эти элементы обладают повышенным значением.

Альтернативный способ акцентировать их важность заключается в следующей формулировке: «жираф в (железной броне:1.2), с (((гиенами))) на заднем плане».

В этом случае мы повысили значимость фразы «железной броне» на 20%, а токена «гиенами» на 30%. Каждая пара круглых скобок добавляет 0.1 к весу, а числовой диапазон от «1.1» до «1.7» обозначает увеличение от 10% до 70%. Установка слишком высокого уровня важности может привести к тому, что нейронная сеть будет генерировать случайный шум вместо ожидаемого изображения.

Обратите внимание! Рекомендуется ограничить количество круглых скобок до пяти, чтобы каждая фраза могла получить должное внимание.

Что касается весовых коэффициентов, лучше всего, чтобы они находились в пределах от 0.1 до 1.7. Тем не менее, для достижения наилучших результатов желательно не превышать 1.4.

Слишком высокий весовой коэффициент может исказить результаты во время генерации.

Использование квадратных скобок в промтах Stable Diffusion

Квадратные скобки выполняют несколько задач, одной из которых является «смешивание» или комбинирование различных элементов. Например, в случае «[жираф:броня:0.4]» нейронная сеть будет генерировать жирафа на 40% от общей картины , в то время как оставшиеся 60% будут посвящены добавлению брони. Общее количество этапов рисования (сэмплирования) можно настроить в основных параметрах SD, например, установив «24 шага» или «35 шагов».

Аналогично, квадратные скобки позволяют генерировать гибриды, такие как «[жираф:гиена:0.3]» сидит на скамейке. Сначала нейронная сеть изобразит жирафа с долей 30%, а затем преобразует его в гиену с долей 70%. В результате получится гибридное существо, находящееся на скамейке. Для разделения предложений лучше избегать различных знаков препинания, кроме запятых. Использование разрывов строк, точек, многоточий и подобных символов обычно не рекомендуется.

Старайтесь не формулировать слишком объемные запросы, так как это может привести к искажению результатов. Оптимальная длина запроса может быть представлена следующим примером:

«летняя фея ((в полный рост)), лето, изысканная и притягательная, на фоне цветущей природы с бабочками и зелеными травами, наслаждающаяся прекрасной погодой, с художественным, кинематографическим освещением и мягкими тенями».

Если вам потребуется изменить изображение, добавив новые элементы или исправив недочеты, используйте инструмент INPAINT вместо того, чтобы расширять запрос в Stable Diffusion.

Для получения полного руководства по написанию промтов для Stable Diffusion обязательно ознакомьтесь с видеороликом, представленным ниже: