Навигатор с искусственным интеллектом для распознавания препятствий, который поможет незрячим и слабовидящим людям ориентироваться на местности, разработали в России в Новосибирском государственном техническом университете (НГТУ). Для работы с системой, которая отличается от аналогов возможностью работать в офлайн-режиме, требуется лишь телефон, передает Oxu.Az со ссылкой на пресс-службу вуза.
"Человек загружает разработанную нами программу, включает камеру и закрепляет гаджет на груди. Дальше работает специально обученная нейросеть. Из видеопотока кадров ИИ распознает обстановку, расстояние до потенциально опасных объектов и звуком оповещает об этом пользователя", - рассказал один из авторов проекта Егор Авдеев.
Для распознавания объектов разработчики используют модель сверточной нейронной сети, которую обучают на вручную размеченных данных. ИИ умеет предупреждать об объектах на расстоянии около 5 м, чтобы не перегружать пользователя информацией, а также реагировать на неожиданно появившиеся препятствия, такие как машины или закрывшиеся ворота, - приложение обрабатывает кадры за 300 мс. От зарубежных аналогов разработка отличается тем, что способна работать в офлайн-режиме и не содержит рекламы и платной подписки.
Команда разработчиков из НГТУ планирует дальнейшее совершенствование системы. В ближайших планах - добавление функции распознавания текста на вывесках и указателях, а также интеграция с картографическими сервисами для построения оптимальных маршрутов. Тестирование прототипа с участием незрячих добровольцев показало высокую эффективность системы в реальных условиях городской среды.
