SDXL в automatic 1111
Привет!
Совсем недавно, а точнее пару дней назад, в сеть слили модель от StabilityAISDXL0.9. У сообщества была весьма скептическая позиция по поводу этой модели, хотя я, попользовавшись ею на сервисе ClipDrop, был не совсем согласен с общим мнением. Меня подкупила общая детализация, динамический и цветовой диапазон генераций, а также такой реалистично-киношный стиль изображений. Тем не менее сообщество начало искать способы работы со слитой моделью. Быстро выяснилось, что использовать ее можно через интерфейс ComfyUI. А всего через несколько дней StabilityAI выпустила свою официальную версию SDXL для публичного пользования.
Я не очень люблю интерфейс ComfyUI и пошел читать интернет в поиске решений запуска модели на привычном мне автоматике и нашел вот такое решение.
Я и comfyUI
Небольшой дисклеймер.
Модель обучалась на изображениях 1024x1024 и требует 12гб видео памяти. Я запустил ее на 8 VRAM. Я к тому, что можно проделать все эти шаги, а оно все равно не заработает.
Для теста расширения я использовал портативную версию webui от Христа.
А вот само расширение XLdemo .
Чтобы поставить расширение нам нужно зайти во вкладку Extentions-Install from URL и вставить в верхнюю строчку вот этот адрес https://github.com/lifeisboringsoprogramming/sd-webui-xldemo-txt2img.git . Нажимаем Install и перезапускаем наш StableDiffusion.
После перезагрузки у нас появится новая вкладка на панели SDXL 0.9 Demo. В ней мы увидим небольшую пошаговую инструкцию к тому, что делать дальше. Не пугайтесь, там все очень просто.
1. Залогиниться на сайте https://huggingface.co/
Если у вас не было там раньше аккаунта, то создайте его. Сайт умеет логиниться аккаунтами гугла, чтоб не пришлось заполнять руками логины\пароли\почты.
2. Зайти на страницу модели на huggingface.
Тык
Дело в том, что разработчики модели на ее странице оставили внизу небольшой опрос. И если его не заполнить, то файлы для скачивания будут попросту не видны.
3. Создаем новый токен на сайте huggingface.
Вот официальная инструкция с сайта как это сделать https://huggingface.co/docs/hub/security-tokens
Вы заходите в свой профиль ( справа, сверху ), переходите в Settings – Access Tokens и снизу будет кнопка New token. Нажимаете на нее, придумываете любое имя Generate a token. Копируем его в буфер обмена.
4. Возвращаемся в наш автоматик и переходим там во вкладку Settings. Находим в левом столбце наше расширение SDXL 0.9 Demo и в единственную строку с настройками вставляем наш токен. Убедитесь, что галочка Enable refiner активна.
5. Применяем настройки
6. Перезагружаем наш StableDiffusion.
Если все было сделано правильно, то начнется загрузка моделей. Это может занять весьма немало времени, модели весят сильно больше 1.5 и их модификаций.
Все, ждем окончания загрузки, переходим во вкладку SDXL 0.9 Demo и пользуемся новой моделью. Стоит отметить, что она не совместима с лорами и ликорисами для моделей на базе 1.5. То есть, со всеми самыми популярными.
Так же буду рад вас видеть в своем телеграм канале, где я выкладываю свои нейро-арты, делюсь промптами, фотографиями и рассказываю про обработку:
https://t.me/artemphotography