Проект направлен на разработку носимого устройства, предназначенного для помощи людям с нарушением слуха в ориентации в акустической среде. Устройство позволяет определять направление источников звука и визуализировать их положение для пользователя.

В основе системы используется микрофонная решётка и алгоритмы пространственной обработки сигналов, позволяющие вычислять направление прихода звуковых волн. Полученные данные обрабатываются цифровыми алгоритмами и передаются пользователю через интерфейс дополненной реальности. Визуальная индикация в AR-очках позволяет пользователю видеть направление источника звука, например голос человека, сигнал автомобиля или сирены.

Дополнительно система может выполнять распознавание речи и выводить текстовую информацию пользователю, что облегчает коммуникацию в повседневной жизни. Использование современных методов цифровой обработки сигналов и аппаратного ускорения позволяет выполнять обработку звука в реальном времени.

Разрабатываемое устройство направлено на повышение безопасности, мобильности и социальной адаптации людей с нарушениями слуха. Проект сочетает технологии пространственной локализации звука, цифровой обработки сигналов и дополненной реальности.

На страницу проекта