В Новосибирском государственном техническом университете (НГТУ) создали навигатор с искусственным интеллектом (ИИ), предназначенный для помощи незрячим и слабовидящим людям в ориентации на местности и распознавании препятствий. Система отличается от аналогов возможностью работать в офлайн-режиме и требует для работы лишь обычный телефон. Информация об этом появилась на официальном сайте НГТУ.
Разработанная программа загружается на смартфон, который затем закрепляется на груди пользователя с включенной камерой. Специально обученная нейросеть обрабатывает видеопоток, распознавая окружающую обстановку и определяя расстояние до потенциально опасных объектов. Обо всех обнаруженных препятствиях система оповещает пользователя звуком.
Для распознавания объектов применяется модель сверточной нейронной сети, обученная на вручную размеченных данных. Искусственный интеллект способен предупреждать об объектах на расстоянии до пяти метров, избегая перегрузки пользователя излишней информацией. Приложение оперативно реагирует на внезапно возникающие препятствия, такие как движущиеся автомобили или закрывающиеся ворота, обрабатывая каждый кадр всего за 300 миллисекунд.
Отличительной особенностью этой разработки от существующих отечественных и зарубежных аналогов является ее полная автономность – навигатор функционирует без подключения к интернету. Кроме того, приложение не содержит рекламы и не требует платной подписки.
Ранее выяснилось, что образовательное ответвление “Смуты” получит грант от ИРИ.