Facebook iPress Telegram iPress Twitter iPress search menu

Microsoft создала приложение, которое рассказывает незрячим людям, что происходит вокруг

Microsoft создала приложение, которое рассказывает незрячим людям, что происходит вокруг
Корпорация Microsoft выпустила мобильное приложение Seeing AI, предназначенное для слабовидящих и слепых людей. Приложение работает на базе нейронных сетей: когда пользователь наводит камеру телефона на объект, приложение распознает его и рассказывает, что происходит вокруг.

Бесплатное приложение Seeing AI пока есть только на iOS и только в американском App Store. Когда он появится на Android и в других странах, в Microsoft не уточняют.

Пользователю сначала нужно указать приложению, ему нужно распознать человека, короткую надпись, текст, купюру, продукт в магазине или вообще все, что приложение увидит. Об этом сообщили в  пресс-службе компании .

Если навести камеру на человека, приложение назовет его примерный возраст и черты внешности (например, носит ли он очки), а также опишет выражение ее лица. Пользователь может сфотографировать своего друга, тогда его изображение сохранится в базе данных, и в следующий раз Seeing AI просто назовет его по имени.

Microsoft встроила в приложение распознавания штрих-кодов. Благодаря этому можно узнать название продукта в магазине и получить его краткое описание. The Verge отмечает, что распознавание купюр особенно актуально в США, где все доллары одного размера и цвета независимо от номинала.

Seeing AI подсказывает пользователю, куда двигать камеру, чтобы нужный объект или надпись вполне попали в кадр. Описывая человека, приложение указывает, как далеко он стоит и в каком углу кадра ее лицо.

Большинство стандартных функций в Seeing AI используют нейросети, работающие на самом телефоне. Благодаря этому распознавания объектов будет срабатывать и без связи. Интернет нужен для экспериментальных функций - таких, как описание сцены в целом и распознавания рукописного текста.

Наконец, Seeing AI научили распознавать изображения, с которыми пользователь сталкивается в других приложениях. Чтобы оно описало, что происходит на картинке, достаточно импортировать картинку в него.

Напомним, в феврале в Гарварде разработали чип , который, стимулируя зрительную зону коры головного мозга, создает имитацию зрения без помощи глаз. Тесты на приматах обещали розпочиты в марте 2017 года.