Приложение Microsoft для людей с нарушением зрения.

Корпорация Microsoft выпустила мобильное приложение для слепых Seeing AI. Предназначенное для слабовидящих и слепых людей, оно описывает происходящее вокруг. Приложение работает на базе нейросетей: когда пользователь наводит камеру телефона на объект, приложение распознает его и рассказывает, что происходит вокруг. Seeing AI – бесплатное, но пока доступное только на iOS и только в американском App Store. Когда оно появится на Android и в других странах, в Microsoft не уточняют, передает Укринформ.


Пользователю сначала нужно указать приложению, что оно должно распознать: человека, короткую надпись, текст, купюру, продукт в магазине или вообще все, что оно увидит.

Если навести камеру на человека, приложение назовет его примерный возраст и черты внешности (например, носит ли он очки), а также опишет выражение его лица. Пользователь может сфотографировать своего друга, тогда его изображение сохранится в базе данных, и в следующий раз Seeing AI просто назовет его по имени, пишет Медуза.


Microsoft встроила в приложение распознавание штрихкодов. Благодаря этому можно узнать название продукта в магазине и получить его краткое описание. Распознавание купюр особенно актуально в США, где все доллары одного размера и цвета вне зависимости от номинала, отмечает The Verge.



Seeing AI подсказывает пользователю, куда двигать камеру, чтобы нужный объект или надпись целиком попали в кадр. Описывая человека, приложение указывает, как далеко он стоит и в каком углу кадра его лицо.