Компания Miscrosoft 12 июля выпустила приложение для слепых и слабовидящих людей Seeing Al. Оно рассказывает пользователю, что происходит вокруг. Об этом рассказало издание Verge.

Если пользователь направит камеру на человека, приложение опишет его внешность, выражение лица и назовет примерный возраст. Еще Seeing Al умеет распознавать продукты по штрихкодам, сканировать и произносить вслух тексты и даже отличать разные долларовые купюры. Программа может описать изображение, которое пользователь нашел в другом приложении — твиттере или каком-нибудь мессенджере. Для этого нужно просто импортировать картинку.

Приложение не только выполняет рядовые операции. Оно может посоветовать подвинуть смартфон, чтобы сфокусироваться на цели.

Seeing Al использует для работы нейросети. Большинство функций приложения работает без подключения к интернету. Но для некоторых сложных операций, например для того, чтобы распознать рукописи или описать пейзаж, нужно иметь доступ к сети. Сейчас приложение доступно только пользователям американского App Store.

Seeing Al разработал слепой сотрудник Microsoft Сакиб Шаих, который потерял зрение в семь лет. Он рассказывал, что чаще всего использует свое приложение для чтения документов и меню в ресторане. Еще Seeing AI помогает ему распознавать дорожные знаки.

Нейросети — компьютерные алгоритмы, прототипом для которых послужила работа биологических нейронных сетей в мозге человека. Их применяют в разных областях науки, в частности, для управления беспилотными автомобилями и дронами и для распознавания любых лиц или предметов.

В 2016 году Google научил нейросеть распознавать простые рисунки и очертания и рассказывать о них. Похожий алгоритм использовала в 2017 году команда pix2pix. Она представила алгоритм, который с помощью нейросетей распознает любой рисунок в реалистичную картину. Российское приложение FindFace умеет распознавать лица людей и находить их аккаунты ВКонтакте.

Видео

Видео