ИИ-поводырь под названием OpenCV Artificial Intelligence Kit with Depth (OAK-D), созданный американскими инженерами, умещается в рюкзаке и может распознавать окружающие объекты и давать своему пользователю советы по взаимодействию с ними.
Основная задача, которая стояла перед инженерами — это упрощение системы и ее миниатюризация. Для работы с устройством достаточно вычислительной мощности простого ноутбука или мини-ПК типа Raspberry Pi. Он кладется в рюкзак вместе с батареей на 8 часов работы и GPS-навигатором. На пояс крепится камера 4K для анализа формы и цвета окружающих объектов, плюс пара стереоскопических камер для определения расстояния. Связь с пользователем осуществляется через обычную Bluetooth-гарнитуру.
OAK-D распознает множество видов типовых объектов на улицах, определяет их местоположение относительно пользователя и сообщает ему о тех, которые могут стать для него препятствием. Например, «Ветка, слева, вверху» или «Бордюр, невысокий, внизу, по центру». По команде «Осмотреться» нейросеть описывает расположенные вокруг объекты – «Светофор на 10 часов», «Куст на 18 часов», «Столб на 9 часов». ИИ обучен распознавать дорожные знаки, указатели и информационные надписи.
Интересна функция запоминания мест, которая создает метки на карте, чтобы ИИ мог выстроить и описать оптимальный маршрут перемещения туда для слабовидящего человека. Также можно запросить информацию о том, где он сейчас находится и что расположено в окрестностях, чтобы принять решение, куда идти. Проект OAK-D носит некоммерческий характер и имеет открытый исходный код.