Computer-Lippenlesen könnte Hörgeräte verbessern

Aktualisierung: 30. März 2021
Computer-Lippenlesen könnte Hörgeräte verbessern

Die im Hörgerät eingebetteten Sensoren sammeln nicht nur Informationen von einer Reihe von Sensoren, um die Sprachverständlichkeit zu verbessern, sondern können auch den Höraufwand und seine Auswirkungen auf die Person abschätzen und anhand dieser Informationen feststellen, ob der Sprachverbesserungsprozess tatsächlich hilft oder nicht nach Wolverhampton.

Das vierjährige Projekt mit dem Titel "Kognitiv inspirierte 5G-IoT-fähige multimodale Hörgeräte" (COG-MHEAR) wurde vom EPSRC (Forschungsrat für Ingenieur- und Naturwissenschaften) im Rahmen der "Transformative Gesundheitstechnologien für" mit 3.2 Mio. GBP ausgestattet 2050 'Schema.

Die Cloud-Verarbeitung wird zunächst verwendet, um den Stromverbrauch zu senken. Für die Cloud-Infrastrukturverbindung werden Schnittstellen mit geringer Latenz (<10 ms) erstellt, um Verzögerungen zwischen akustischen Daten und verarbeiteten Bilddaten zu vermeiden.

Flexible E-Skin-Elektronik und kundenspezifische Antennen sind geplant, um abgenutzte Geräte klein zu halten.

Um Probleme mit Leistung, Größe und Latenz zu lösen, besteht die langfristige Absicht darin, die gesamte Verarbeitung lokal durchzuführen und Algorithmen auf dedizierter Hardware auszuführen, die Beschleuniger enthält.

"Unsere Vision 2050 ist es, über 5G-IoT und Internet hinaus eine internetunabhängige gehirnähnliche On-Chip-Verarbeitung zu erreichen, um Probleme mit der Größe von Hörgeräten, dem Strombudget, der Kommunikation und der Cybersicherheit zu lösen", sagte der stellvertretende Projektleiter Ahsan Adeel von der University of Wolverhampton (Abbildung).

Das Sammeln visueller Informationen - beispielsweise Videos von Lippenbewegungen - kann zu Datenschutzproblemen führen. „Wir können einige dieser Fragen lösen, indem wir die Daten verschlüsseln, sobald sie erfasst werden, und wir werden Pionieransätze für die Verarbeitung und das Verständnis der Videodaten entwickeln, während diese verschlüsselt bleiben“, so der EPSRC-Zuschuss. „Wir möchten niemals auf die Rohvideodaten zugreifen, sie aber dennoch als nützliche Informationsquelle verwenden. Um dies zu ergänzen, werden wir auch Methoden zum Fernlesen von Lippen ohne Verwendung eines Video-Feeds untersuchen und stattdessen die Verwendung von Funksignalen für die Fernüberwachung untersuchen. “

Neben der Edinburgh Napier University und der University of Wolverhampton gehören zu den Projektpartnern: University of Edinburgh, University of Glasgow, Heriot-Watt University, University of Manchester, University of Nottingham, Sonova und Nokia Bell-Labs. Alpha-Daten. Digital Health & Care Institute, The Data Lab und Deaf Scotland und Maßnahmen gegen Hörverlust.