Программно-аппаратный комплекс "Локатор"

Программно-аппаратный комплекс представлен в виде комплекса носимых устройств для лиц с инвалидностью или ограниченными возможностями здоровья по зрению. Центральное носимое устройство представляет собой очки со встроенными стереокамерой и стереонаушниками, а также вычислительный модуль, основанный на графическом процессоре Nvidia Jetson TX1. Устройство способно вести построение карты глубины в режиме реального времени для передачи пользователю информации о глубине пространства тактильно-звуковым методом. Устройство при помощи свёрточных нейронных сетей способно вести распознавание важных для пользователя элементов быта. Полученная информация об объекте передается пользователю устройства при помощи настроенного голосового модуля.

Функционал программно-аппаратного комплекса

Демонстрация работы ПАК "Локатор"

Основной особенностью разработанного центрального вычислительного устройства является возможность переноса массивных вычислений на удаленный сервер, что позволит увеличить время автономной работы основного устройства до 6-ти часов. Максимальное время автономной работы у аналогичных зарубежных разработок составляет не более 3-х часов, поэтому данная возможность станет ключевой особенностью разработки на мировом рынке.

Режимы работы центрального устройства

Модуль определения препятствий и опасностей на уровне ног представлен в виде компактных насадок на обувь пользователя. Устройства способны обнаруживать опасности в виде ступенек, небольших неровностей и резких изменений рельефа на пути пользователя, а также передавать информацию об обнаруженных опасностях посредством тактильных сигналов. Принцип работы данного модуля основан на использовании искусственных нейронных сетей.

Модуль тактильного оповещения представляет собой отдельное устройство, способное вести гарантированное обнаружение препятствий на уровне груди, а также передавать слепоглухому пользователю информацию о глубине пространства, полученную от центрального носимого устройства.

Презентация направления