В последние годы технологии, помогающие людям с нарушениями зрения, значительно развились, однако остаются возможности для их совершенствования. Команда Университета штата Пенсильвания разработала приложение NaviSense, основанное на реальных потребностях пользователей и возможностях современных искусственных интеллектов. NaviSense в реальном времени распознает объекты и направляет пользователей с помощью голосовых и вибрационных сигналов. Участники тестирования отметили, что такая навигация оказалась более точной и интуитивной по сравнению с существующими аналогами. Приложение было представлено на конференции SIGACCESS ASSETS`25 в Денвере и получило приз зрительских симпатий. NaviSense уникален тем, что подключается к внешнему серверу с крупными языковыми моделями, что позволяет ему описывать окружающую среду без необходимости загружать заранее подготовленные библиотеки объектов. Также приложение отслеживает движения руки, указывая, где находится нужный предмет относительно телефона. В испытаниях с 12 добровольцами NaviSense значительно сократил время поиска объектов и повысил точность их определения по сравнению с двумя коммерческими аналогами, получив положительные отзывы о простоте и удобстве использования.