Приложение NaviSense для людей с нарушениями зрения

В последние годы технологии, помогающие людям с нарушениями зрения, значительно развились, однако все еще есть возможности для их улучшения. Команда Университета штата Пенсильвания разработала приложение NaviSense, которое основывается на реальных потребностях пользователей и возможностях современных искусственных интеллектов. NaviSense осуществляет распознавание объектов в реальном времени и предоставляет навигационные указания с помощью голосовых и вибросигналов. В тестах пользователи отметили, что навигация через NaviSense была более точной и естественной по сравнению с другими существующими решениями. Приложение было представлено на конференции SIGACCESS ASSETS`25 в Денвере и получило приз зрительских симпатий. Оно отличается тем, что подключается к внешнему серверу с мощными языковыми моделями, что позволяет описывать окружающую среду без необходимости предварительной загрузки библиотек объектов. NaviSense также отслеживает движения руки и указывает местоположение нужного предмета относительно телефона. В испытаниях с 12 добровольцами приложение значительно сократило время поиска объектов и улучшило точность их определения по сравнению с коммерческими аналогами, что сделало его более удобным для пользователей.

Понравилась статья? Поделиться с друзьями: