Решил попробовать поэкспериментировать с созданием видео на основе контента генерируемого Dalle-2
За основу я взял картину, которую на день рождение мне подарила pak_ha_photo и далее я уменьшал исходное изображение в два раза и "просил" нейросеть дорисовать свободное место вокруг, и так повторял снова и снова.
Итак продолжим предыдущие части материала:
- Часть 1
- Часть 2
После предыдущих пейзажей я решил посмотреть на варианты пейзажей с осенью вместо лета и сменить стиль с акварели на масло
An impressionist oil painting painting of Rybinsk with view from water on bridge, museum and church at autumn time
Затем я решил попробовать режим работы с созданием вариантов по готовому изображению.
Я взял картинку медведя-пивовара из моего туристического пэт-проекта, и запросил нейросеть создать другие варианты эскиза. И получилось на удивление не плохо
Затем я опробовал вариант дорисовки\перерисовки изображения — взял картинку медведя, и запросил Bear in engineering helmet and blueprints in hands и разметив область головы и рук (вместо секиры)
Далее я решил посмотреть, что будет если разметить все изображение как возможное место для перерисовки с запросом Bear in watercolor type with Rybinsk museum background
И еще раз попробовал варианты, в этот раз вышло более коряво для медведя с секирой
Продолжим пробы с вариантами — тут я использовал свою фотографию с фестиваля в косплее на Иванушку из Морозко
Итак, продолжим первую часть поего поста https://pikabu.ru/story/dalle_2__moi_pervyie_yeksperimentyi_i_vozmozhnosti_neyroseti__chast_1_9326070
Digital art of cosplayers with costumes from games, films, anime before they go on stage to show whey work and performance
И для картинки с девушкой с фиолетовыми волосами я решил посмотреть как сработает функция создания вариантов — и получилось более чем достойно
Pixel art of cosplayers with costumes from games, films, anime before they go on stage to show whey work and performance
И пиксель арт получается достаточно интересный
А теперь пришло время пейзажей. Как вариант я решил посмотреть что же может сделать нейросеть касательно моего родного города Рыбинска, и насколько это будет похоже на открыточные виды.
An impressionist watercolor painting of Rybinsk with view from water on bridge, museum and church at summer time
Этим результатом я был очень впечатлен, так как на многих фотографиях обычно как раз фигурирует собор, здание музея с красной крышей и мостом через волгу
И для примера фотография города
Затем для того же запроса я попросил сделать еще вариантов, и вот что получилось
Еще в прошлом году я в свое время подавался в лист ожидания для того чтобы опробовать нейросеть GPT3 для генерации текстов, и спустя достаточно длительное ожидание она попала ко мне в руки, и даже в рабочем проекте мы с ней поэкспериментировали.
И когда Open AI открыли возможность получить доступ к их новой нейросети DALL·E 2 я конечно же воспользовался возможностью и вот на прошлой неделе и она попала мне в руки.
Введение — а что это за DALL·E 2 такая?
Те кто в курсе спокойно пропускайте этот раздел, а те кто увидел этот пост и не имеет контекста о что за дали (он же художник такой, да?) добро пожаловать
Немного про саму нейросеть DALL·E 2 — она создана для генерации изображений на основе пользовательского описания.
https://openai.com/dall-e-2/ — на сайте проекта достаточно подробно и с примерами показывается что эта штука уже может, но я добавлю пару примеров в статью, чтобы у вас как у читателя сразу был некоторый контекст.
Астронавт отдыхающий в тропическом отеле в космосе в фотореалистичном стиле
Тарелка супа которая является порталом в другое измерение как «digital art» («цифровое искусство»)
Астронавт верхом на лошади как карандашный рисунок
Также кроме создания изображений с нуля, данная нейросеть способна модифицировать изображения дорисовывая что-то на них, так и создавать варианты исходного изображения.
Пример создания вариантов из исходного изображения
Пример модификации изображения — нейросеть попросили дорисовать диван
Итак, после того как все мы поняли что же эта штука умеет, настало время проверить это на практике.
Тесты нейросети и интересные результаты
Unreal engine 5 space station background inspired with space games and films
(unreal engine 5 фоновая космическая станция вдохновлённая космическими играми и фильмами)
Этот вариант генерации вышел несколько абстрактным, но в целом неплохо
Viewst team (developers, designers, managers and so on) making coding and sales of they wysiwyg software what helps create animated banners in Leonardo da Vinci styles
Как видно получается неплохо, задумка похожа на стоковые фотографии о командах которые делают свои дизайнерско\разработческие и прочие дела, но вот качество лиц конечно подкачало на «фотореалистичных вариантах»
И также как вы думаю заметите и на некоторых других изображениях нейросеть пытается в текст, и насколько помню из тестов других людей он для самой сети может что-то значить
Теперь перейдем к другим стилям
Realistic oil painting of Doggy in medieval armor with viewst chameleon logo on shield fighting with dragon of low sales
(Реалистичная масляная живопись изображающую Догги в средневековой броне с Viewst логотипом хамелеоном на щите сражающейся с драконом низких цен)
А вот это уже весьма круто выглядит и более чем соответствует запросу — не считая отсутствия дракона низких цен :)
Photo of cosplayers with costumes from games, films, anime before they go on stage to show whey work and performance
(Фото косплееров с костюмами по играм, фильмам и аниме перед тем как они выйдут на сцену показать свою работу и выступление)
Опять мы видим проблему с лицами людей (и любовь по всей видимости к аниме у нейросети :) )
А теперь попробуем поменять стиль для такого запроса
Digital art of cosplayers with costumes from games, films, anime before they go on stage to show whey work and performance
И так как я уперся в лимит для одного поста, то остальные кусочки уже опубликую отдельными частями:
- Часть 2
- Часть 3
- Часть 4
Источник: https://t.me/photohystory1/286
Мой телеграм канал "История в фотографиях"
Буду признателен если вы на него подпишитесь
Всех приветствую!
Довелось и мне теперь испытать эту нейросеть.
Что я хочу сказать:
1) В отличии от первой версии работает в разы лучше. Рисунки получаются более осмысленные и соответствуют запросу (даже самым наркоманским)
2) Разрешение стало выше
3) Работает быстрее.
В России тоже использовали некий ruDALL-E (сбер, если не ошибаюсь, делал), но... Но у меня стойкое ощущение, что он не рисовал, а перерисовывал, т.к. встречались такие работы, в которых даже ватермарки есть ("перерисованные").
Пример ruDALL-E по запросу "Тюлень":
Вернемся к новому DALL-E 2.
Зададим ему пару наркоманских запросов. Например:
"painting of a cat playing chess with a dog"
Неплохо, правда?
Конечно, наблюдаются косяки, но в целом - очень даже неплохо.
Давайте добавим немного наркомании:
"Gopher rides a dog, that runs away from an anteater"
Не все условия соблюдены - но в целом РАБОТАЕТ.
При чем работает куда лучше, первой версии.
Что ж, ждём общедоступный релиз
P.S. Знаю, что посты уже были, но сейчас удалось потрогать лично.
Наверное, многие слышали про AI Dall-e 2.0, который рисует - не побоюсь этого слова - шедевры. (впрочем, моя жена художник с этим не согласна потому, что нередко получается и ерунда. А, может, она просто завидует). Результат сильно зависит от того, как вы сформировали запрос на написание картины.
Вот, например, можно посмотреть видео с удачными картинами:
Тестирование закрытое, то есть сейчас не каждый может воспользоваться Dall-e.
В феврале я подал заявку на получение доступа и вот вчера его получил. Публикую несколько работ, которые получились у Dall-e:
Щенок с розовым ошейником, закат и Луна на краю обрыва, а рядом человек него
Вино льётся из бутылки в бокал, создавая каскад алых брызг на тёмном фоне
Невидимые люди улетают на луну
Трое молодых друзей сидят за столом, вспоминая о былых днях
Мудрец сидит на краю пропасти и смотрит на горы
А вот так Dall-e изображает Сальвадора Дали с телефоном
Если кто-то тоже хочет попробовать - подписывайтесь на мой канал о Dall-e https://t.me/nedalle
Присылайте через бота свои запросы на картины с пометкой PIKABU - все опубликуем с повышенным приоритетом (фразе "повышенный приоритет" научился у Тинькофф). Разумеется, все это бесплатно даже без пометки PIKABU :)
