В Новосибирске создали ИИ-навигатор для слабовидящих и незрячих людей
В НГТУ (НЭТИ) разработали навигатор с искусственным интеллектом (ИИ) для распознавания препятствий. Он даст возможность незрячим и слабовидящим людям ориентироваться на местности.
По словам разработчиков, инклюзивный ИИ-видеонавигатор можно использовать с помощью телефона на базе Android.
Человек загружает разработанную нами программу, включает камеру и закрепляет гаджет на груди. Дальше работает специально обученная нейросеть. Из видеопотока кадров ИИ распознает обстановку, расстояние до потенциально опасных объектов и звуком оповещает об этом пользователя, — рассказал один из авторов разработки студент третьего курса АВТФ Егор Авдеев.
По его словам, для распознавания объектов разработчики используют модель свёрточной нейронной сети*, которую обучают на данных, размеченных вручную. ИИ предупреждает об объектах на расстоянии не более 5 м, чтобы не перегружать пользователя лишней информацией и успевать реагировать на неожиданно появившиеся препятствия, например, машины. Приложение обрабатывает кадры за 300 мс.
От своих аналогов разработка отличается способностью работать в офлайн-режиме. Она не содержит рекламы и платной подписки. Также скоро будет добавлена возможность предлагать программе свои объекты для распознавания, строить маршрут по голосовому запросу и искать объекты по названию. Как уточнили разработчики, проект почти готов. Перед выпуском ему предстоит пройти итоговое тестирование.
Инициатор проекта — доцент кафедры радиоприемных и радиопередающих устройств факультета радиотехники и электроники Андрей Никулин. В 2024 г. разработал ручной помощник для незрячих и слабовидящих людей. Проект уже получил высокую оценку жюри в конкурсе студенческих проектов старшей лиги и завоевал первое место среди ИТ-проектов.
СПРАВКА
*Свёрточная нейронная сеть — специальная архитектура искусственных нейронных сетей, предложенная Яном Лекуном в 1988 г. и нацеленная на эффективное распознавание образов. Входит в состав технологий глубокого обучения. Использует некоторые особенности зрительной коры.
Качество жизни
| Мнения
| ВИКИ — биографии персон и справки о компаниях
| ||||||||||||||||||||||||||||||||||||||||||||||||||
Самое читаемое
В сентябре в Екатеринбурге откроют «Легенду» 
Анна Печеркина: «Дегенеративные изменения мозга начинаются после 25 лет» 
Инфляция замедляется, вклады растут: как экономика Урала повлияла на решение ЦБ по ставке 
«Вы не сможете сослаться на то, что вас не уведомили»: юрист — об электронных повестках 
«РУСАЛ» запустил новое импортозамещающее производство в Каменске-Уральском