Технологии
Дамир Камалетдинов

В США создали рюкзак с компьютерным зрением для помощи слабовидящим — он сообщает о препятствиях голосом

Устройство непрерывно следит за окружением и предупреждает о дорожных знаках, ветках деревьев, бордюрах и не только.

«Умный» рюкзак использует пространственную 4К-камеру, которая крепится на пояс или на жилет, а также GPS-приёмник. Камера строит карту глубины и передаёт данные в рюкзак, где их обрабатывает вычислительный модуль с помощью технологий Intel. Об этом TJ рассказали в компании со ссылкой на авторов разработки.

Фото Джагадиша Махендрана

Рюкзак в реальном времени сообщает голосом о препятствиях — дорожных знаках, висячих препятствиях, пешеходных переходах, бордюрах, лестницах, движущихся объектах и изменении высоты. Для этого авторы проекта использовали готовую камеру Luxonis OAK-D, которая оснащена встроенными возможностями машинного обучения и компьютерного зрения.

Она работает с нейросетями и размечает карту глубины в реальном времени, а решение на базе технологий Intel Movidius VPU и OpenVINO распознаёт объекты и передаёт данные голосом в беспроводные наушники пользователя по Bluetooth. При этом камере нужно отдельное питание, которое инженеры предложили разместить в поясной сумке — батарея обеспечивает до восьми часов работы устройства от одного заряда.

Камера Luxonis OAK-D Фото Make Magazine

Как отметили в Intel, по данным ВОЗ, во всём мире насчитывается около 285 миллионов человек с ослабленным зрением. При этом существующие системы визуальной помощи для навигации имеют ограниченные возможности, потому что им не хватает восприятия глубины, пояснили в компании.

Автором проекта выступил Джагадиш Махендран из Института ИИ при Университете Джорджии. Он рассказал, что на создание «умного» рюкзака его вдохновила встреча со слабовидящим приятелем в 2020 году.

Я был поражён горькой иронией того, что пока я обучаю роботов видеть, на свете есть много людей, нуждающихся в помощи. Это побудило меня создать систему визуальной помощи на базе открытого ПО OpenCV Artificial Intelligence Kit с пространственной ИИ-системой зрения Depth (OAK-D) от Intel.

Джагадиш Махендран

#новости #intel #нейросети