ИИ-навигация помогает людям с нарушением зрения
ИИ-навигация помогает людям с нарушением зрения
Разработка искусственного зрения для слабовидящих и слепых людей давно является целью исследований. Носимые электронные системы визуальной помощи являются альтернативой медицинским вмешательствам и имплантируемым протезам. Устройства преобразуют визуальную информацию из окружающей среды в другие сенсорные сигналы. Таким образом помогают выполнять повседневные задачи. Устройства были не очень удобны в использовании. Но исследователи из Шанхая представили усовершенствованную систему, сообщает mdr.de. ИИ-навигация помогает слепым и слабовидящим людям ориентироваться в пространстве.
Читайте также: Нейроимплант с ИИ возвращает голос немым
Как работает ИИ-навигация
Система основана на очках с видеокамерой и встроенными RGB‑D сенсорами. Сначала незрячий человек указывает пункт назначения с помощью голоса. Затем алгоритмы искусственного интеллекта (ИИ) обрабатывают визуальные данные с очков. Таким образом они оценивают ориентацию, цели и определяют маршрут без препятствий в режиме реального времени.
Сигналы об окружающей обстановке перед человеком могут передаваться ему через костно-звуковые наушники. Это беспроводные наушники, которые посылают звуковые волны прямо в череп. При этом они не затрагивают барабанную перепонку.
Человек перемещается по комнате, избегая препятствий. В это время система обновляет трехмерную сцену в режиме реального времени. Движения синхронизируются с помощью «умных» стелек в обуви человека.
Искусственная кожа вибрирует при столкновении с препятствиями
Искусственное зрение также поддерживается сенсорными импульсами на коже. Исследователи разработали ультратонкую и растягивающуюся искусственную кожу под названием A‑Skin. Приводная технология для нее расположена на запястье. Датчики – на тыльной стороне указательного или среднего пальца. Благодаря этому обычные движения руки не нарушаются.
Пальцевые датчики измеряют расстояние до объектов сбоку во время ходьбы. Если человек подходит слишком близко, например, к препятствию слева, датчик на левом запястве вибрирует. Это заставляет человека переместиться правее и наоборот. Все это происходит в течение нескольких миллисекунд. Пальцевые датчики и вибрационные импульсы также помогают при захвате предметов.
Проводились испытания с роботами и людьми
Устройство было протестировано в различных сценариях применения с гуманоидными роботами, а также со слабовидящими и слепыми людьми в виртуальной и реальной среде. Сочетая визуальные, акустические и тактильные ощущения, исследователи смогли выявить значительные улучшения в выполнении навигационных задач. Например, когда участникам исследования нужно было избежать препятствий при прохождении лабиринта или схватить определенный объект.
Предыдущие системы визуальной помощи часто были слишком громоздкими, тяжелыми и не портативными. А из-за низкого удобства использования и трудоемкого обучения они редко использовались и принимались сообществом слабовидящих и слепых людей. По этой причине были усовершенствованы как программное, так и аппаратное обеспечение системы. Помимо технической реализации, самой сложной задачей является разработка мощных, но компактных и энергосберегающих устройств.
Читайте также:
- Новая кожа для роботов работает как человеческая
- ИИ ставит диагноз: помощник врача или риск для пациента?
- Новая генная терапия: ДНК модифицируют прямо в теле