Система на основе компьютерного зрения помогает слепым ориентироваться в пространстве на 25% быстрее, чем при использовании белой трости.
Исследователи из Шанхайского университета Цзяотун представили прототип носимого устройства, которое использует ИИ, чтобы помочь слепым людям перемещаться в пространстве. Система состоит из очков с встроенной камерой, которая в реальном времени делает снимки окружающей среды.
Иллюстрация принципа работы умных очков. Изображение: Jian Tang et al., Nature Machine Intelligence
Миниатюрный компьютер обрабатывает изображения с помощью алгоритмов компьютерного зрения, обученной распознавать людей и препятствия: двери, стены, мебель. Каждые 250 мс устройство дает подсказки через наушники, направляя пользователя в правильную сторону.
Систему дополняет «искусственная кожа» — гибкие накладки, которые пользователи носят на запястьях и пальцах. Они оснащены встроенными камерами и вибрируют, предупреждая о препятствиях на расстоянии от 5 до 40 см. Они также вибрируют, когда пользователь тянется к объекту: предупреждая, когда пришло время схватить его.
Тестирование системы в лабиринте. Видео: Jian Tang et al., Nature Machine Intelligence
В испытании 20 добровольцев с нарушениями зрения при использовании системы в очках проходили 25-метровый лабиринт в среднем на 25% быстрее, чем при использовании трости. Тесты на улице и в заставленном мебелью конференц-зале подтвердили удобство технологии.
Тестирование системы на улице. Видео: Jian Tang et al., Nature Machine Intelligence
Исследователи работают над улучшением дизайна устройства, чтобы сделать его легче и компактнее. Они хотели бы в будущем уменьшить камеру до размеров, позволяющих разместить ее на контактной линзе.
