Новые технологии помогают слепым и слабовидящим людям ориентироваться в пространстве. Система из Шанхая превращает визуальные данные в звуковые и тактильные сигналы. При этом помогает избегать препятствий и взаимодействовать с окружающим миром почти в реальном времени.

ИИ-навигация помогает людям с нарушением зрения

ИИ-навигация помогает людям с нарушением зрения

Разработка искусственного зрения для слабовидящих и слепых людей давно является целью исследований. Носимые электронные системы визуальной помощи являются альтернативой медицинским вмешательствам и имплантируемым протезам. Устройства преобразуют визуальную информацию из окружающей среды в другие сенсорные сигналы. Таким образом помогают выполнять повседневные задачи. Устройства были не очень удобны в использовании. Но исследователи из Шанхая представили усовершенствованную систему, сообщает mdr.de. ИИ-навигация помогает слепым и слабовидящим людям ориентироваться в пространстве.

Читайте также: Нейроимплант с ИИ возвращает голос немым

Как работает ИИ-навигация

Система основана на очках с видеокамерой и встроенными RGB‑D сенсорами. Сначала незрячий человек указывает пункт назначения с помощью голоса. Затем алгоритмы искусственного интеллекта (ИИ) обрабатывают визуальные данные с очков. Таким образом они оценивают ориентацию, цели и определяют маршрут без препятствий в режиме реального времени.

Сигналы об окружающей обстановке перед человеком могут передаваться ему через костно-звуковые наушники. Это беспроводные наушники, которые посылают звуковые волны прямо в череп. При этом они не затрагивают барабанную перепонку.

ИИ-навигация помогает людям с нарушением зрения. Фото: Igor Omilaev / unsplash.com

Человек перемещается по комнате, избегая препятствий. В это время система обновляет трехмерную сцену в режиме реального времени. Движения синхронизируются с помощью «умных» стелек в обуви человека.

Искусственная кожа вибрирует при столкновении с препятствиями

Искусственное зрение также поддерживается сенсорными импульсами на коже. Исследователи разработали ультратонкую и растягивающуюся искусственную кожу под названием A‑Skin. Приводная технология для нее расположена на запястье. Датчики – на тыльной стороне указательного или среднего пальца. Благодаря этому обычные движения руки не нарушаются.

Пальцевые датчики измеряют расстояние до объектов сбоку во время ходьбы. Если человек подходит слишком близко, например, к препятствию слева, датчик на левом запястве вибрирует. Это заставляет человека переместиться правее и наоборот. Все это происходит в течение нескольких миллисекунд. Пальцевые датчики и вибрационные импульсы также помогают при захвате предметов.

Проводились испытания с роботами и людьми

Устройство было протестировано в различных сценариях применения с гуманоидными роботами, а также со слабовидящими и слепыми людьми в виртуальной и реальной среде. Сочетая визуальные, акустические и тактильные ощущения, исследователи смогли выявить значительные улучшения в выполнении навигационных задач. Например, когда участникам исследования нужно было избежать препятствий при прохождении лабиринта или схватить определенный объект.

Предыдущие системы визуальной помощи часто были слишком громоздкими, тяжелыми и не портативными. А из-за низкого удобства использования и трудоемкого обучения они редко использовались и принимались сообществом слабовидящих и слепых людей. По этой причине были усовершенствованы как программное, так и аппаратное обеспечение системы. Помимо технической реализации, самой сложной задачей является разработка мощных, но компактных и энергосберегающих устройств.

Читайте также:

Подпишитесь на наш Telegram
Получайте по 1 сообщению с главными новостями за день
Заглавное фото: Growtika / unsplash.com

Читайте также:

Обсуждение

Подписаться
Уведомить о
guest
0 комментариев
Старые
Новые Популярные
Межтекстовые Отзывы
Посмотреть все комментарии