Пацанчик высокой четкости

Пацанчик высокой четкости Нейронные сети, Мобильная фотография, Разработка, Длиннопост

разное фокусное рассояние

Если снимать фото вблизи - далеко всё размыто. Если далеко - вблизи всё размыто. А что если взять идею HDR и объединить несколько снимков?

Пацанчик высокой четкости Нейронные сети, Мобильная фотография, Разработка, Длиннопост

Мой китаец умеет снимать "живые фото". Это около 10 кадров с разным фокусным расстоянием.

Берем это псевдо-видео, экспортируем как набор фото, и запихиваем в одну из этих нейронок.

Пацанчик высокой четкости Нейронные сети, Мобильная фотография, Разработка, Длиннопост

Какие нейросети можно использовать чтобы объединить изображения с различными фокусами (или видео из таких изображений) в одно четкое изображение?

Скорее всего придется делать сервер, который это всё делает ибо на телефоне есть только одно приложение в бете для Midjorney (Midjourney AI Art Generator) . Да и допилить нейронку если че можно.

Отправить обратно, вывести. Ничего сложного.

Под капотом нейронка или CV модуль :

  • для каждого кадра определяет фокусное расстояние

  • выделяет копируемую зону попиксельно

  • записывает эти зоны в итоговый файл

Почему это нельзя было сделать искаропки я не понимаю.

Единственное что меня смущает в пересылке туда-обратно - это размер. Одно фото может занимать 5-10мб. А их 10. Фотосессия сожрет весь мобильный траффик пользователя.

Что скажете?