В Новосибирске создали ИИ-навигатор для слабовидящих и незрячих людей
В НГТУ (НЭТИ) разработали навигатор с искусственным интеллектом (ИИ) для распознавания препятствий. Он даст возможность незрячим и слабовидящим людям ориентироваться на местности.
По словам разработчиков, инклюзивный ИИ-видеонавигатор можно использовать с помощью телефона на базе Android.
Человек загружает разработанную нами программу, включает камеру и закрепляет гаджет на груди. Дальше работает специально обученная нейросеть. Из видеопотока кадров ИИ распознает обстановку, расстояние до потенциально опасных объектов и звуком оповещает об этом пользователя, — рассказал один из авторов разработки студент третьего курса АВТФ Егор Авдеев.
По его словам, для распознавания объектов разработчики используют модель свёрточной нейронной сети*, которую обучают на данных, размеченных вручную. ИИ предупреждает об объектах на расстоянии не более 5 м, чтобы не перегружать пользователя лишней информацией и успевать реагировать на неожиданно появившиеся препятствия, например, машины. Приложение обрабатывает кадры за 300 мс.
От своих аналогов разработка отличается способностью работать в офлайн-режиме. Она не содержит рекламы и платной подписки. Также скоро будет добавлена возможность предлагать программе свои объекты для распознавания, строить маршрут по голосовому запросу и искать объекты по названию. Как уточнили разработчики, проект почти готов. Перед выпуском ему предстоит пройти итоговое тестирование.
Инициатор проекта — доцент кафедры радиоприемных и радиопередающих устройств факультета радиотехники и электроники Андрей Никулин. В 2024 г. разработал ручной помощник для незрячих и слабовидящих людей. Проект уже получил высокую оценку жюри в конкурсе студенческих проектов старшей лиги и завоевал первое место среди ИТ-проектов.
СПРАВКА
*Свёрточная нейронная сеть — специальная архитектура искусственных нейронных сетей, предложенная Яном Лекуном в 1988 г. и нацеленная на эффективное распознавание образов. Входит в состав технологий глубокого обучения. Использует некоторые особенности зрительной коры.
Поделиться
Качество жизни
| Мнения
| ВИКИ — биографии персон и справки о компаниях
| ||||||||||||||||||||||||||||||||||||||||||||||||||
Самое читаемое
Кабмин одобрил повышение лимита по полису ОСАГО 
Александр Давыдов: «Екатеринбург без мифа — просто набор улиц и зданий» 
Гендиректора «Эксмо» обвинили в пропаганде ЛГБТ* и задержали 
«Пациенту все хуже: такого затоваривания на рынке аренды в Екатеринбурге на было никогда» 
Новосибирский министр сельского хозяйства лишился поста после убоя животных