Помимо сбора информации от ряда датчиков для улучшения разборчивости речи, датчики, встроенные в слуховой аппарат, могут оценивать усилие на слух и его влияние на человека и использовать это, чтобы определить, действительно ли помогает процесс улучшения речи или нет. в Вулверхэмптон.
Четырехлетний проект, получивший название «Когнитивно-вдохновленные мультимодальные слуховые аппараты с поддержкой 5G-IoT» (COG-MHEAR), получил от EPSRC (Научно-исследовательский совет по инженерным и физическим наукам) 3.2 млн фунтов стерлингов в рамках проекта «Преобразовательные технологии здравоохранения для Схема 2050 года.
Первоначально для снижения энергопотребления будет использоваться облачная обработка, при этом будут созданы интерфейсы с низкой (<10 мс) задержкой для соединения с облачной инфраструктурой, чтобы избежать задержек между акустическими данными и обработанными данными изображения.
Планируется, что гибкая электронная оболочка и специальные антенны уменьшат размер изношенных устройств.
Чтобы решить проблемы с питанием, размером и задержкой, долгосрочное намерение состоит в том, чтобы выполнять всю обработку локально, выполняя алгоритмы на выделенном оборудовании, которое включает ускорители.
«Наше видение 2050 года - выйти за рамки 5G-IoT и Интернета, для независимой от Интернета мозгоподобной обработки на кристалле для решения проблем размера слухового аппарата, бюджета мощности, связи и кибербезопасности», - сказал заместитель директора проекта Ахсан Адил из Университета Вулверхэмптон (фото).
Сбор визуальной информации - например, видео с движениями губ - может вызвать проблемы с конфиденциальностью. «Мы можем решить некоторые из этих вопросов, зашифровав данные, как только они будут собраны, и мы будем первыми в подходах к обработке и пониманию видеоданных, пока они остаются зашифрованными», - говорится в заявке на грант EPSRC. «Мы стремимся никогда не обращаться к необработанным видеоданным, но при этом использовать их как полезный источник информации. В дополнение к этому, мы также исследуем методы удаленного чтения по губам без использования видеопотока, вместо этого исследуем использование радиосигналов для удаленного мониторинга ».
Наряду с Эдинбургским университетом Напье и университетом Вулверхэмптона партнерами проекта являются: Эдинбургский университет, Университет Глазго, Университет Хериот-Ватт, Университет Манчестера, Университет Ноттингема, Сонова, Nokia Bell-Labs. Альфа-данные. Институт цифрового здравоохранения и здравоохранения, Лаборатория данных и глухая Шотландия, а также меры по борьбе с потерей слуха.