يمكن لقراءة الشفاه بالكمبيوتر تحسين المعينات السمعية

التحديث: 30 مارس 2021
يمكن لقراءة الشفاه بالكمبيوتر تحسين المعينات السمعية

بالإضافة إلى جمع المعلومات من مجموعة من المستشعرات لتحسين وضوح الكلام ، يمكن لأجهزة الاستشعار المضمنة في السمع تقدير جهد الاستماع وتأثيره على الشخص ، واستخدام هذا لمعرفة ما إذا كانت عملية تحسين الكلام تساعد بالفعل أم لا ، وفقًا إلى ولفرهامبتون.

تم منح المشروع الذي يمتد لأربع سنوات 5 مليون جنيه إسترليني من قبل مجلس أبحاث الهندسة والعلوم الفيزيائية (EPSRC) تحت عنوان `` تقنيات الرعاية الصحية التحويلية مخطط 3.2 '.

سيتم استخدام المعالجة السحابية مبدئيًا لتقليل استهلاك الطاقة ، مع واجهات زمن انتقال منخفضة (أقل من 10 مللي ثانية) تم إنشاؤها لرابط البنية التحتية السحابية لتجنب التأخير بين البيانات الصوتية وبيانات الصورة المعالجة.

تم التخطيط لإلكترونيات الجلد الإلكترونية المرنة والهوائيات المخصصة للحفاظ على الأجهزة البالية صغيرة.

لمعالجة مشكلات الطاقة والحجم والكمون ، فإن النية طويلة المدى هي القيام بكل عمليات المعالجة محليًا ، وتشغيل الخوارزميات على أجهزة مخصصة تتضمن مسرعات.

قال نائب مدير المشروع أحسان عديل من جامعة ولفرهامبتون (في الصورة).

قد يؤدي جمع المعلومات المرئية - مقاطع الفيديو الخاصة بحركة الشفاه ، على سبيل المثال - إلى حدوث مشكلات تتعلق بالخصوصية. "يمكننا التغلب على بعض هذه الأسئلة من خلال تشفير البيانات بمجرد جمعها ، وسنقوم بدور رائد في معالجة وفهم بيانات الفيديو بينما تظل مشفرة" ، وفقًا لتقديم منحة EPSRC. "نحن نهدف إلى عدم الوصول مطلقًا إلى بيانات الفيديو الأولية ، ولكن لا نزال نستخدمها كمصدر مفيد للمعلومات. لاستكمال ذلك ، سنبحث أيضًا في طرق قراءة الشفاه عن بُعد دون استخدام تغذية الفيديو ، وبدلاً من ذلك نستكشف استخدام إشارات الراديو للمراقبة عن بُعد ".

إلى جانب جامعة إدنبرة نابير وجامعة ولفرهامبتون ، يشمل شركاء المشروع: جامعة إدنبرة ، جامعة جلاسكو ، جامعة هيريوت وات ، جامعة مانشستر ، جامعة نوتنغهام ، سونوفا ، مختبرات نوكيا بيل. ألفا داتا. معهد الرعاية الصحية الرقمية ومختبر البيانات والصم اسكتلندا والعمل على فقدان السمع.