Что может описать ваш смартфон?

Сегодня с помощью камеры смартфона и искусственного интеллекта незрячий пользователь может получить довольно точное и подробное описание окружающего пространства,
а иногда даже отыскать нужный предмет. Какие приложения можно использовать и в чем их особенности, разбираемся в данной статье.

Все перечисленные приложения можно установить бесплатно. Функционал некоторых из них больше, чем говорится в статье. Автор не “топит” за какое-то из них
и не считает, что заявленные функции работают без сбоев. Также в статье не упоминается возможность позвонить волонтеру или знакомому по видеосвязи.

Напоминаем, что незрячие жители любого региона России могут пройти очное или дистанционное обучение по курсам мобильной и (или) компьютерной грамотности
у опытных тренеров Центра “Камерата”. Для этого можно подать заявку на портале “Особый взгляд” или обратиться за консультацией по бесплатному телефону
общероссийской горячей линии “IT-помощь незрячим”: 8-800-550-46-80 по будним дням с 8 утра до 8 вечера.

1. Сними и послушай.

Вы можете сделать фото пространства перед собой и послушать краткое или подробное описание с помощью нескольких мобильных приложений:

– На вкладке “Be my AI” в приложении “Be my eyes”. можно сделать снимок, а после получения описания попросить больше. Откроется чат, где можно писать вопросы
и получать текстовые ответы, касающиеся сделанного изображения. Чтобы получить описание другого изображения, придется выйти из диалога и сделать новый
снимок.

– Функция “Описать изображение” в приложении “Envision AI” предлагает получить как полное, так и краткое описание сделанной фотографии. При этом, уточняющие
вопросы можно задавать как текстом, так и голосом.

– В режиме AI приложения “Sullivan plus” также можно сделать фото и получить описание, но для этого не нужно искать кнопку на экране, можно воспользоваться
клавишами громкости на корпусе смартфона.

– В режиме “Сцена” приложения “Seeing AI” можно не только получить описание, но и изучить сделанную фотографию, водя пальцем по экрану. Приложение будет
сообщать названия распознанных предметов. Таким образом, можно составить представление об их взаимном расположении.

2. Автоматическое описание окружающих предметов.

В некоторых приложениях можно включить специальный режим, чтобы фотографии делались без участия пользователя через равный промежуток времени. Тогда можно

– В режиме “Проводить исследование” в приложении “Supersens” пользователь слышит названия отдельных объектов, которые попадают в камеру. Внимание! в этом
режиме приложения часто находят те предметы, которых нет поблизости. Это обусловлено особенностями работы нейронных сетей.

– В приложении “Lookout” есть сразу 2 похожих режима: “Изображение” и “Распознавание окружающих объектов”. В последнем кроме названия объектов также проговаривается
распознанный текст. Кажется, что последний режим перегружен информацией и не удобен на практике.

– В режиме “Описание автоматического изображения” в приложении “Sullivan plus” проговариваются не названия объектов, а краткое описание всей картинки перед
камерой. Удобно для оперативного осмотра окружающей обстановки.

3. Поиск нужного предмета.

– В приложении “Envision AI” имеется функция “Поиск предметов”. Можно выбрать один из списка и приложение сообщит, если оно появится в поле зрения объектива.
К сожалению, протестировать эту функцию автору статьи не удалось. Поэтому, просим читателей поделиться опытом.

– В приложении “Sullivan plus” в режиме “Исследование” также можно выбрать один из списка предметов или искать все сразу. Например можно обнаружить унитаз
в туалете без всякой мнемосхемы.

– В приложении “Supersens” предусмотрена функция “Находить”. Можно искать предметы по категориям, а можно написать в строке поиска интересуемый объект.
Как только он попадает в камеру, пользователь получает соответствующее сообщение.

– Режим “Поиск” приложения “Lookout” предлагает выбрать категории предметов. Но их не так много по сравнению с аналогами. Зато приложение сообщает расстояние
до предмета и его относительное положение.

– В приложении “Я могу видеть” для iOS устройств есть удобная функция голосового запроса, благодаря которой упрощается взаимодействие с приложением. При
этом, разработчик утверждает, что для работы приложения интернет не требуется.

Таким образом, для получения информации об окружающих объектах незрячим пользователям смартфонов доступно несколько мобильных приложений, отличающихся
удобством и функционалом. Будем и дальше следить за появлением новых полезных и удобных функций. А если вы хотите поделиться своим мнением или опытом по
данной тематике, не стоит себя ограничивать. Напишите комментарий. Каждое мнение важно.

Курсы мобильной грамотности организованы в рамках общероссийского социального проекта “Универсальный мобильный помощник”, который реализуется Центром “Камерата”
при поддержке ПАО “МегаФон”.