Реконструкция внешности Натальи Гончаровой, супруги Пушкина
На первом этапе, с помощью инструмента SUPIR я восстановил до околофотографического качества два портрета Гончаровой, написанных примерно в одно и тоже время, но с разных углов ракурса "три четверти". Результат можно увидеть ниже.
На втором этапе я воспользовался инструментом InstantID. На вход подавал ему два фотографичных портрета, а на выходе он сгенерировал мне около сотни изображений усредненной Гончаровой, которая одновременно похожа и на первый и на второй портреты.
На третьем этапе, с помощью FaceAnalysis среди сотни похожих лиц я выделил только те, у которых была минимальная Эвклидова и косинусная разница с настоящими портретами Натальи. Если перевести похожесть на язык процентов, то можно сказать, что она уверенно выше 90%. И это не субъективная оценка человеческого глаза, а результат математического анализа.
И, наконец, на последнем этапе я вновь воспользовался апскейлером SUPIR, чтобы максимально детализировать выбранные восемь изображений. Ну и бонусом немного поэкспериментировал с последней версией модели Stable Video Diffusion.
Все инструменты, которые были упомянуты выше, стали широко доступны для использования только в этом году.