401

Американские учёные научили нейросеть создавать 3D-модель лица по фотографии

Программисты из Университета Корнелла научили нейросеть по одной фотографии создавать точную 3D-модель лица человека, пишет Gizmodo. Программа уже создала 3D-изображения Мохаммеда Али, Иэна Кертиса и Дональда Трампа.


Для обучения нейросети авторы использовали снимки из Chicago Face Database, содержащей сотни фотографий людей разных рас и возрастов.


Сначала программа распознаёт по фотографии форму лица и создаёт для него карту альбедо, определяющую диффузный цвет, который виден при освещении предмета белым светом. После этого сверточная нейросеть VGG-19 анализирует изображение, распознает отдельные части лица и подбирает к ним реалистичные текстуры.

Американские учёные научили нейросеть создавать 3D-модель лица по фотографии 3D, 3d-модель лица, Нейронные сети, Нейросеть vgg-19, Видео, Гифка, Длиннопост
Недостающие детали изображения система реконструирует самостоятельно, сравнивая модель с другими изображениями из базы.
Американские учёные научили нейросеть создавать 3D-модель лица по фотографии 3D, 3d-модель лица, Нейронные сети, Нейросеть vgg-19, Видео, Гифка, Длиннопост

Нейросеть подбирает текстуры. Shunsuke Saito et al / ArXiv.org

Американские учёные научили нейросеть создавать 3D-модель лица по фотографии 3D, 3d-модель лица, Нейронные сети, Нейросеть vgg-19, Видео, Гифка, Длиннопост
3D-модель лица Иэна Кертиса. Shunsuke Saito et al / ArXiv.org
Система также может убирать лишние шумы, если исходное изображение плохого качества.
Американские учёные научили нейросеть создавать 3D-модель лица по фотографии 3D, 3d-модель лица, Нейронные сети, Нейросеть vgg-19, Видео, Гифка, Длиннопост

Процесс создания трёхмерной модели лица Ким Чен Ына. Shunsuke Saito et al / ArXiv.org

Разработчики считают, что эта программа пригодится для создания собственных трёхмерных аватаров и для реконструкции внешности исторических персонажей.
Американские учёные научили нейросеть создавать 3D-модель лица по фотографии 3D, 3d-модель лица, Нейронные сети, Нейросеть vgg-19, Видео, Гифка, Длиннопост

3D-модель лица Мохаммеда Али. Prosthetic Knowledge

Полный текст исследования доступен на Arxive.org.

http://apparat.cc/news/neural-network-3d-face-render/

36
Автор поста оценил этот комментарий
Будет что-то вроде этого?
Иллюстрация к комментарию
раскрыть ветку
9
Автор поста оценил этот комментарий

Бегущий человек (1987), фейковая битва с Капитаном Свободой.

Иллюстрация к комментарию
15
Автор поста оценил этот комментарий

Ок, я скажу это вслух:
т.е. не за горами день, когда находишь в Контактике фото одноклассницы/ одногруппницы /соседки/ сокамерника, в программке лепишь образ, заливаешь в какой-нибудь BrazzersGenerationModel, и... э... наслаждаешься красой и качеством 3D-анимации

раскрыть ветку
47
DELETED
Автор поста оценил этот комментарий
тридэшники есть? нас тут, кажется, планируют работы лишить. надо замоделить бомбу под этим универом
раскрыть ветку
6
Автор поста оценил этот комментарий

С каждым днём НИФИГАСЕБЕ о нейросетях вырывается всё громче

раскрыть ветку