Сообщество - Искусственный интеллект
Добавить пост

Искусственный интеллект

328 постов 4 414 подписчиков
872

Про автора, заставившего Маска петь "Трава у дома"

Ну днях стало набирать популярность видео, на котором Илон Маск исполняет песню "Трава у дома". Автор этого ролика Никита Коваленко (kolpekzad) рассказал, что искусственным интеллектом начал увлекаться менее месяца назад, а о запланированном запуске Crew Dragon он ничего не знал.

В 29 лет инженер по криогенной технике из Москвы Никита Коваленко решил резко изменить свою жизнь и посвятить ее созданию видео при помощи искусственного интеллекта (ИИ).


"Завтра мой последний день. Я уволился, откуда - секрет, решил изучить новую дисциплину - data science и машинное обучение. Наткнулся на технологию дипфейк, имея тягу к весёлым видео решил сделать свои", – говорит Никита Коваленко.

Про автора, заставившего Маска петь "Трава у дома" Илон Маск, Земляне, Deepfake, Видеомонтаж, Видео, Длиннопост

По его словам, для обработки видео они использует программу DeepFaceLab, на освоение которой ушло менее недели.


"На создание одного видео уходит 1-3 дня. Компьютер работает все время. При этом, чтобы создать один ролик обычно достаточно 1 минуты видео в разных ракурсах с персонажем, которого нужно поместить на видео, но при желании можно уложиться в 15 секунд", — рассказал Никита Коваленко.


Автор признается, что не все созданные им видео смотрятся нормально. Но свои ошибки он уже понял.


"Например Федук и Элджей - исходное видео плохого качества, я очень долго его делал, но мне очень нравилась идея, поэтому выложил", — отметил Коваленко.

Идея сделать видео с Илоном Маском пришла ему на ум три недели назад.


"Хотел сделать дипфейк с советской песней, выбрал траву у дома и тут пришел на ум Маск. Только когда уже увидел готовое видео подумал, что оно на миллион просмотров, и когда нибудь наберет его", — отметил Коваленко, добавив, что тогда он планируемом запуске ракетый компанией Space X он не знал. — "Да, я вчера смотрел запись запуска ракеты и даже подумать не мог, что видео разойдется"

В ближайшем времени автор планирует выпускать новые музыкальные клипы.


Источник

Показать полностью 1 1
127

Нейросеть для создания логотипов

На волне новостей про нейросеть Лебедева вспомнил о своей сети которая делает логотипы, может в дизайнеры податься 🤔

а вот и примеры логотипов (я не знаю почему картинка съехала)

Нейросеть для создания логотипов Нейронные сети, Логотип, Артемий Лебедев, Видео
Нейросеть для создания логотипов Нейронные сети, Логотип, Артемий Лебедев, Видео
Показать полностью 2
57

Pantomime — новый сервис для анимации лиц и создания стикеров на нейронках

Зацените новый сервис — pantomime.it.


Загружаешь фотку друга/собаки/Ван Гога, выбираешь эмоцию, и твоя фотка оживает. Можно наделать стикеров и троллить друзей.

Pantomime — новый сервис для анимации лиц и создания стикеров на нейронках Анимация, Настя Ивлеева, Мобильная фотография, Онлайн-Сервис, Нейронные сети, Искусственный интеллект, Гифка
7050

MORTAL KOMBAT HD

На волне мемов в HD качестве решила запилить персонажей всеми любимой игры. Получилось очень даже забавно.

Лю Кан

MORTAL KOMBAT HD Remini, Mortal Kombat 3, HD, Длиннопост, Нейронные сети

Саб-Зиро младший

MORTAL KOMBAT HD Remini, Mortal Kombat 3, HD, Длиннопост, Нейронные сети

Кано

MORTAL KOMBAT HD Remini, Mortal Kombat 3, HD, Длиннопост, Нейронные сети

Джакс

MORTAL KOMBAT HD Remini, Mortal Kombat 3, HD, Длиннопост, Нейронные сети

Соня

MORTAL KOMBAT HD Remini, Mortal Kombat 3, HD, Длиннопост, Нейронные сети

Какой-то раскрашенный мужчина в образе Милины

MORTAL KOMBAT HD Remini, Mortal Kombat 3, HD, Длиннопост, Нейронные сети

Горо Васильевна

MORTAL KOMBAT HD Remini, Mortal Kombat 3, HD, Длиннопост, Нейронные сети

Саб-Зиро

MORTAL KOMBAT HD Remini, Mortal Kombat 3, HD, Длиннопост, Нейронные сети

Скорпион на стиле

MORTAL KOMBAT HD Remini, Mortal Kombat 3, HD, Длиннопост, Нейронные сети
Показать полностью 9
5615

Нейросети и старые фотографии

Помимо основной своей работы, немного занимаюсь реставрацией и восстановлением фотографий. С приходом в наше время нейросетей, я с любопытством за ними наблюдаю. Помните, сначала эти фотографией с мордами животных, будто лсд трип? Потом наложение фильтров на фото в тему различных художественных стилей, далее изменение сезона года с камер видеорегистраторов , где из зимы делали лето и наоборот. Потом всем известный deepfake с заменой лиц, который с каждым годом всё лучше и лучше (гляньте только эпизод из "Назад в будущее" с Томом Холладном и Робертом Дауни Мл.!). Вспоминается ещё небольшая рисовалка от Nvidia, где можно было мазками как в паинте нарисовать красивый пейзаж. И вот теперь то, что я честно ждал - восстановление расфокусированных, старых, низкокачественных или низкого разрешения фотографий.

Для начала я попробовал на старом отсканированном фото своего деда, где много шума, видно текстуру бумаги и т.д.

Нейросети и старые фотографии Реставрация, Нейронные сети, Длиннопост, Remini

Если долго смотреть на фотографию, видно что получается будто нарисованная карандашом  картина, но профессиональным художником. Да, белые точки, царапины и др. дорисовываются также, потому что нейросеть не понимает нужные ли это объекты для фото или нет. Но радует как преобразуются волосы, щетина и другие детали. И главное убирается этот проклятый шум!

Далее фото ещё одного дедушки, погибшего в ВОВ. Не идеально. Но лицо стало лицом.

Нейросети и старые фотографии Реставрация, Нейронные сети, Длиннопост, Remini

Третей фотографией я залил фото своей тёти, трагически погибшей в 14 лет, у который поэтому было очень мало фотографий. На эмоциях скидываю фотографии своему отцу, который "тыжпрограммист" со стажем. Сказал: Очень круто! Особенно сестра. Если судить памяти, по похожести дорисовалось примерно на 80-90%. Единственное с глазами беда, но можно дофотошопить.

Нейросети и старые фотографии Реставрация, Нейронные сети, Длиннопост, Remini

Скидываю ему ссылку на приложение, отец открывает свой архив сканов, и первым делом заливает свою расфокусированную фотку с мыльницы из 90х. Идентичность 100%. Даже прыщ на бороде.

Нейросети и старые фотографии Реставрация, Нейронные сети, Длиннопост, Remini

Ну и напоследок. Недавно как раз восстанавливал фотографию одной бабушки. Само фото было очень маленькое, а лицо на нём вообще составляло меньше сантиметра.

1. Фото отсканировано в 2400dpi.

2. Моё восстановление + быстрая коллоризация

3. Восстановление оригинала скана приложением

4. Восстановление моей обработанной фотографии + немного фотошопа

Нейросети и старые фотографии Реставрация, Нейронные сети, Длиннопост, Remini

По итогу хочу сказать, что это очень круто. Жаль работает только на лица.

Ещё видел не мало отзывов, что "рисует" абсолютно других людей. Но в моём случае (да если ещё совмещать с фотошопом) получается практически идеально. Приложение называется Remini есть на iOs и Android. И да, может быть кто-то знает аналоги для ПК?

Показать полностью 3
28

Морти, мы в UltraHD! Как посмотреть любой фильм в 4K, дорисовав его через малоизвестную нейросеть

Наверное, вы слышали про технологию Яндекса DeepHD, с помощью которой они как-то раз улучшили качество советских мультфильмов. Увы, в публичном доступе ее еще нет, а у нас, рядовых программистов, вряд ли найдутся силы написать свое решение. Но лично мне, как обладателю Retina-дисплея (2880х1800), недавно очень захотелось посмотреть «Рика и Морти». Какого же было мое разочарование, когда я увидел, как мыльно на этом экране выглядит 1080р, в котором существуют оригиналы этого мультсериала! (это прекрасное качество и обычно его вполне достаточно, но поверьте, ретина так устроена, что анимация с ее четкими линиями в 1080р выглядит мыльновато, словно 480р на FHD-мониторе).


Я твердо решил, что хочу увидеть этот мультсериал в 4К, хотя и совершенно не умею писать нейросети. Однако решение было найдено! Любопытно, что нам даже не придется писать код, понадобится лишь ~100 ГБ места на диске и немного терпения. А результат — четкое изображение в 4К, которые выглядит достойнее, чем любая интерполяция.

Морти, мы в UltraHD! Как посмотреть любой фильм в 4K, дорисовав его через малоизвестную нейросеть Нейронные сети, Качество, Длиннопост

Подготовка


Во-первых, надо сразу понять, что в открытом доступе нет технологии по увеличению видео с помощью нейросетей. Вообще. Но зато есть несколько проектов, которые способны увеличивать фотографии. А раз так, давайте перекодируем наше видео в огромную кучу кадров!

Это можно сделать через Adobe Premiere Pro или другую программу для работы с видео, но я уверен, что такая установлена далеко не у всех. Поэтому давайте воспользуемся консольной утилитой ffmpeg. Я взял первую серию первого сезона, и понеслось:

$ ffmpeg -i RiM01x01_4K.mp4 -q:v 1 IM/01x01_%05d.jpg

Почему JPG, а не PNG?

Подождав примерно 10 минут, мы получим большущую папку с изображениями. У меня она заняла 26 ГБ.

Морти, мы в UltraHD! Как посмотреть любой фильм в 4K, дорисовав его через малоизвестную нейросеть Нейронные сети, Качество, Длиннопост

Осталось обработать каждый из этих кадров!


Как будем обрабатывать?


Я нашел три варианта, работающих более-менее нормально — это небезизвестный Let’s Enhance, waifu2x (натренирован на аниме) и Mail.ru Vision.

Чуть позже я обязательно покажу примеры.

Mail.ru Vision и Let’s Enhance неплохо обрабатывали изображения, но они, к сожалению, не опенсорсные, то есть для обработки 31000 картинок нам придется писать создателям на почту и, вероятно, немало заплатить. Поэтому я пригляделся к оставшемуся waifu2x, но он не порадовал меня качественным результатом, были шумы и нечеткости. Все-таки «Рик и Морти» — это не аниме.

Я уже было отчаялся бесконечно листать Github и тематические форумы, но… Спасение вдруг пришло! Нашелся вариант, который работает на машине локально, обрабатывает картинку меньше, чем за секунду, и показывает отличное качество. И вы не поверите, кто в очередной раз пришел нам на помощь!

Adobe Photoshop!

И нет, я не буду рассказывать true story о том, как там можно парочкой фильтров сделать хорошую картинку. Adobe действительно натренировали самую настоящую нейросеть, которая при масштабировании внутри программы может дорисовать изображение!

Для начала нужно открыть исходное изображение, затем перейти через верхнее меню в Изображение > Размер изображения… и выбрать ресамплинг «Сохранение Деталей 2.0».

Морти, мы в UltraHD! Как посмотреть любой фильм в 4K, дорисовав его через малоизвестную нейросеть Нейронные сети, Качество, Длиннопост

Результат приятно удивил! Пожалуй, впереди только Let’s Enhance. Вот и обещанное сравнение (исходное изображение приближено примерно в 8 раз)

Морти, мы в UltraHD! Как посмотреть любой фильм в 4K, дорисовав его через малоизвестную нейросеть Нейронные сети, Качество, Длиннопост

— И что теперь, вручную обрабатывать каждый кадр через фотошоп?


Конечно, нет! В фотошопе есть инструмент Actions, который позволяет сначала записать последовательность действий, а потом применить ее на целую папку с изображениями. Не буду расписывать весь процесс, он легко гуглится.

Я оставил свой ноутбук обрабатывать тридцать одну тысячу кадров на ночь по шаблону «сделай апскейл в два раза и сохрани». Проснулся утром — все готово! Еще одна папка с кучей кадров, но теперь уже в 4К и с размером в 82 ГБ.

Назад, в видео

Нам снова поможет ffmpeg.

Понимаем, что мы совсем забыли про аудиодорожку, и достаем ее из оригинального файла:

ffmpeg -i RiM01x01_1080p.mp4 -vn -ar 44100 -ac 2 -ab 320K -f mp3 sound.mp3

А потом скидываем саунд в папку со всеми 4К-кадрами. Все наши труды прошли не зря, мы готовы к финальной склейке!

ffmpeg -i 01x01_%05d.jpg -i sn.mp3 -vcodec libx264 -preset veryslow -crf 10 -r 23.976 RiM_01x01_4K.mp4

Будьте внимательны: после -r ставьте именно такое количество кадров, какое было в оригинале, иначе звук не будет совпадать с картинкой!

Готово!

Мы получили первую серию «Рика и Морти» в 4К. Вот сэмпл. Конечно, это было немного по-ламерски, что ли… Но на самом деле у такого подхода есть серьезное преимущество. При работе с другими фильмами или мультиками мы можем удобнейшим образом, прямо через Photoshop доводить их кадры до идеала. Подобрали идеальную резкость и балансировку цветов под несколько кадров из фильма, потом записали свои действия в Action, распространили на весь фильм, и получили отличный результат без всяких математических сложностей. Это делает чудо-апскейл чуть ближе к обычному пользователю. Сложнейшие вещи, к которым люди шли веками, воспроизводятся быстро и без специальных знаний — что это, если не будущее?


Источник:

https://habr.com/ru/post/438886/

Показать полностью 3
169

Мысли в 5 часов ночи

Я тут подумал, а что, если во сне наш мозг, поскольку освобождается большое количество ресурсов,  запускает кучу "виртуальных машин" для симуляции жизни на основе текущего опыта(сформированные кусочки нейросети), пытаясь туда добавить ранее полученные переживания самыми разными способами. И выбирается для дальнейшего использования тот вариант, где обучение прошло более успешно, типа как в генетическом алгоритме. И в каждый момент мы осознаём только одну из таких симуляций.

Мои подписки
Подписывайтесь на интересные вам теги, сообщества,
пользователей — и читайте персональное «Горячее».
Чтобы добавить подписку, нужно авторизоваться.
Отличная работа, все прочитано!