Selain mengumpulkan informasi dari berbagai sensor untuk meningkatkan kejelasan ucapan, sensor yang disematkan di dalam alat bantu dengar dapat memperkirakan upaya mendengarkan, dan dampaknya pada orang tersebut, dan menggunakannya untuk mengetahui apakah proses peningkatan ucapan benar-benar membantu atau tidak, menurut ke Wolverhampton.
Dinamakan 'alat bantu dengar multi-moda 5G-IoT yang diilhami secara kognitif' (COG-MHEAR), proyek empat tahun itu telah diberi £ 3.2 juta oleh EPSRC (Dewan penelitian ilmu teknik dan fisik) di bawah 'Teknologi perawatan kesehatan transformatif untuk Skema 2050 '.
Pemrosesan awan akan digunakan pada awalnya untuk mengurangi konsumsi daya, dengan antarmuka latensi rendah (<10 md) yang dibuat untuk tautan infrastruktur awan untuk menghindari penundaan antara data akustik dan data gambar yang diproses.
Elektronik e-skin yang fleksibel dan antena khusus dirancang untuk menjaga perangkat yang usang tetap kecil.
Untuk mengatasi masalah daya, ukuran, dan latensi, tujuan jangka panjangnya adalah melakukan semua pemrosesan secara lokal, menjalankan algoritme pada perangkat keras khusus yang menyertakan akselerator.
“Visi kami 2050 adalah untuk melampaui 5G-IoT dan internet, untuk pemrosesan on-chip seperti otak yang tidak bergantung internet untuk mengatasi masalah ukuran alat bantu dengar, anggaran daya, komunikasi dan keamanan siber,” kata wakil direktur proyek Ahsan Adeel dari University of Wolverhampton (digambarkan).
Mengumpulkan informasi visual - video gerakan bibir, misalnya - dapat menimbulkan masalah privasi. “Kami dapat mengatasi beberapa pertanyaan ini dengan mengenkripsi data segera setelah dikumpulkan, dan kami akan merintis pendekatan untuk memproses dan memahami data video saat data tersebut tetap dienkripsi”, menurut pengajuan hibah EPSRC. “Kami bertujuan untuk tidak pernah mengakses data video mentah, tetapi tetap menggunakannya sebagai sumber informasi yang berguna. Untuk melengkapi ini, kami juga akan menyelidiki metode untuk membaca bibir jarak jauh tanpa menggunakan umpan video, alih-alih mengeksplorasi penggunaan sinyal radio untuk pemantauan jarak jauh. "
Bersama dengan Universitas Edinburgh Napier dan Universitas Wolverhampton, mitra proyek meliputi: Universitas Edinburgh, Universitas Glasgow, Universitas Heriot-Watt, Universitas Manchester, Universitas Nottingham, Sonova, Nokia Bell-Labs. Data Alfa. Institut Kesehatan & Perawatan Digital, Lab Data dan Skotlandia Tunarungu, dan Aksi untuk Kehilangan Pendengaran.