Bilgisayarda dudak okuma, işitme cihazlarını iyileştirebilir

Güncelleme: 30 Mart 2021
Bilgisayarda dudak okuma, işitme cihazlarını iyileştirebilir

Konuşma anlaşılırlığını geliştirmek için bir dizi sensörden bilgi toplamanın yanı sıra, işitme cihazının içine yerleştirilmiş sensörler, dinleme çabasını ve bunun kişi üzerindeki etkisini tahmin edebilir ve bunu, konuşma iyileştirme sürecinin gerçekten yardımcı olup olmadığını söylemek için kullanabilir. Wolverhampton'a.

'Bilişsel açıdan ilham alan 5G-IoT özellikli çok modlu işitme cihazları' (COG-MHEAR) olarak adlandırılan dört yıllık projeye, 'Dönüştürücü sağlık teknolojileri' kapsamında EPSRC (Mühendislik ve fizik bilimleri araştırma konseyi) tarafından 3.2 milyon £ verildi. 2050' planı.

Akustik veriler ile işlenmiş görüntü verileri arasındaki gecikmeleri önlemek amacıyla bulut altyapı bağlantısı için düşük (<10 ms) gecikme süreli arayüzler oluşturularak, başlangıçta güç tüketimini azaltmak için bulut işleme kullanılacaktır.

Esnek e-deri elektroniği ve özel antenlerin, aşınmış cihazları küçük tutması planlanıyor.

Güç, boyut ve gecikme sorunlarını çözmek için uzun vadeli amaç, tüm işlemleri yerel olarak yapmak ve algoritmaları hızlandırıcılar içeren özel donanım üzerinde çalıştırmaktır.

Proje direktör yardımcısı Ahsan Adeel, "2050 vizyonumuz, işitme cihazı boyutu, güç bütçesi, iletişim ve siber güvenlik sorunlarını ele almak üzere internetten bağımsız beyin benzeri çip üzerinde işleme için 5G-IoT ve internetin ötesine geçmektir" dedi. Wolverhampton (Resimde).

Görsel bilgi toplamak (örneğin dudak hareketlerini gösteren videolar) gizlilik sorunlarına yol açabilir. EPSRC hibe başvurusuna göre, "Verileri toplanır toplanmaz şifreleyerek bu soruların bazılarının üstesinden gelebiliriz ve video verilerinin şifrelenmiş haldeyken işlenmesi ve anlaşılmasına yönelik yaklaşımlara öncülük edeceğiz". "Ham video verilerine hiçbir zaman erişmemeyi ama yine de bunları yararlı bir bilgi kaynağı olarak kullanmayı hedefliyoruz. Bunu tamamlamak için, video yayını kullanmadan uzaktan dudak okuma yöntemlerini de araştıracağız, bunun yerine uzaktan izleme için radyo sinyallerinin kullanımını araştıracağız."

Edinburgh Napier Üniversitesi ve Wolverhampton Üniversitesi'nin yanı sıra proje ortakları arasında şunlar bulunmaktadır: Edinburgh Üniversitesi, Glasgow Üniversitesi, Heriot-Watt Üniversitesi, Manchester Üniversitesi, Nottingham Üniversitesi, Sonova, Nokia Bell-Labs. Alfa Verileri. Dijital Sağlık ve Bakım Enstitüsü, Veri Laboratuvarı ve Sağır İskoçya ve İşitme Kaybına Karşı Eylem.