Столб, урна, скамейка или припаркованный автомобиль — носимый ИИ-навигатор ГУАП должен распознавать такие объекты перед незрячим или слабовидящим человеком. Камера передаёт изображение микрокомпьютеру, который обрабатывает его без интернета и облачных сервисов.
Две задачи на прогулке
Построить пешеходный маршрут к нужному адресу и заметить скамейку перед собой — разные задачи. В разработке ГУАП ими занимаются два вычислительных контура. Один ведёт человека к выбранному месту, другой анализирует пространство непосредственно перед ним. Оба работают на самом носимом устройстве.
О петербургском проекте администрация Санкт-Петербурга сообщила 10 июля 2026 года. Комплекс предназначен для незрячих и слабовидящих людей: он объединяет навигацию по городу с распознаванием окружающих предметов.
Первый контур разработчики называют макронавигацией, второй — микронавигацией. Задачи между ними распределены так:
- Макронавигация распознаёт голосовую команду пользователя, находит нужный адрес на офлайн-карте и строит пешеходный маршрут.
- Микронавигация получает видеопоток с камеры и с помощью облегчённой нейросети распознаёт объекты городской инфраструктуры.
- При анализе пространства перед человеком комплекс оценивает расстояние до обнаруженных объектов.
Среди предметов, перечисленных университетом, — столбы, урны, скамейки и припаркованные автомобили. По замыслу разработчиков, подсказки о направлении движения должны сопровождаться предупреждениями о том, что находится на пути.
Камера и микрокомпьютер
Аппаратная основа навигатора — компактный микрокомпьютер с портативной камерой. Комплекс закрепляется на пользователе, а изображение с камеры поступает на обработку прямо в носимое устройство.
Распознавание окружающих объектов не требует интернет-соединения и обращения к облачным сервисам. Выбор такой архитектуры в сообщении администрации объясняют задержками, которые возникают при передаче видеопотока в облако. На оживлённой улице предупреждение должно поступить вовремя, пока человек ещё может отреагировать на препятствие.
При автономной обработке изображение не нужно отправлять на удалённый сервер и ждать результата. И маршрутный контур, и анализ видеопотока работают непосредственно на компактной вычислительной платформе, которую человек носит с собой.
Препятствие важнее поворота
Два параллельных процесса требуют определённого порядка голосовых сообщений. Пока навигатор объясняет дальнейший путь, перед пользователем может возникнуть препятствие. В таком случае маршрутная подсказка уступает место предупреждению.
«Петербургский дневник» 12 июля сообщил, что при внезапной угрозе микронавигационный контур приоритетно прерывает указания маршрута. Первым человек слышит экстренное предупреждение о ближайшей опасности, а не очередную подсказку о направлении движения.
Этот порядок связывает две задачи комплекса: движение к адресу и ориентирование среди предметов перед человеком. Карта задаёт путь, камера помогает распознавать обстановку по ходу движения, а приоритет сообщений позволяет немедленно озвучить угрозу.
Нейросеть на мобильном компьютере
Для такой работы недостаточно закрепить камеру на корпусе. Навигация и распознавание должны выполняться параллельно, хотя вычислительные возможности носимого компьютера ограничены.
Издание передало пояснение автора проекта: исследовательская задача состояла в оптимизации тяжёлых моделей искусственного интеллекта под ограничения мобильного компьютера. Для анализа видеопотока в комплексе используется облегчённая нейросеть. Она распознаёт городские объекты и помогает оценивать расстояние до них, пока другой контур занимается маршрутом.
От разработки к испытаниям
В июльском материале «Петербургского дневника» говорится, что тесты подтвердили стабильность работы устройства. Разработку рассматривают как возможную основу для отечественных интеллектуальных средств реабилитации.
На испытаниях проверяли носимый комплекс, в котором офлайн-карты, голосовые команды и обработка видеопотока работают на одной компактной платформе. При внезапной угрозе предупреждение микронавигации прерывает маршрутную подсказку.