Naast het verzamelen van informatie van een reeks sensoren om de spraakverstaanbaarheid te verbeteren, kunnen sensoren die in het hoortoestel zijn ingebouwd, de luisterinspanning en de impact ervan op de persoon inschatten en dit gebruiken om te bepalen of het spraakverbeteringsproces daadwerkelijk helpt of niet, volgens naar Wolverhampton.
Het vierjarige project, genaamd 'Cognitively-inspired 5G-IoT enabled multi-modale hoortoestellen' (COG-MHEAR), kreeg £ 3.2 miljoen van de EPSRC (Engineering and Physical Sciences Research Council) in het kader van de 'Transformative healthcare technologies for 2050' regeling.
Cloudverwerking zal in eerste instantie worden gebruikt om het stroomverbruik te verminderen, met lage (<10ms) latentie-interfaces die zijn gemaakt voor de cloudinfrastructuurverbinding om vertragingen tussen akoestische gegevens en verwerkte beeldgegevens te voorkomen.
Flexibele e-skin-elektronica en aangepaste antennes zijn gepland om versleten apparaten klein te houden.
Om problemen met stroom, grootte en latentie aan te pakken, is het op de lange termijn de bedoeling om alle verwerking lokaal uit te voeren, waarbij algoritmen worden uitgevoerd op speciale hardware, inclusief versnellers.
"Onze visie voor 2050 is om verder te gaan dan 5G-IoT en internet, voor internetonafhankelijke hersenachtige on-chip verwerking om gehoorapparaatgrootte, stroombudget, communicatie en cyberbeveiligingsproblemen aan te pakken", zei adjunct-projectdirecteur Ahsan Adeel van de Universiteit van Wolverhampton (afgebeeld).
Het verzamelen van visuele informatie, bijvoorbeeld video's van lipbewegingen, kan leiden tot privacyschendingen. "We kunnen een aantal van deze vragen oplossen door de gegevens te versleutelen zodra ze zijn verzameld, en we zullen baanbrekende benaderingen ontwikkelen voor het verwerken en begrijpen van de videogegevens terwijl deze versleuteld blijven", aldus de EPSRC-subsidie-inzending. “We streven ernaar om nooit toegang te krijgen tot de onbewerkte videogegevens, maar deze toch te gebruiken als een nuttige informatiebron. Als aanvulling hierop gaan we ook methoden onderzoeken voor liplezen op afstand zonder gebruik te maken van een videofeed, in plaats daarvan onderzoeken we het gebruik van radiosignalen voor monitoring op afstand.”
Samen met Edinburgh Napier University en University of Wolverhampton omvatten projectpartners: University of Edinburgh, University of Glasgow, Heriot-Watt University, University of Manchester, University of Nottingham, Sonova, Nokia Bell-Labs. Alfa gegevens. Digital Health & Care Institute, The Data Lab en Deaf Scotland en Action on Hearing Loss.