קריאת שפתיים במחשב עשויה לשפר את מכשירי השמיעה

עדכון: 30 במרץ 2021
קריאת שפתיים במחשב עשויה לשפר את מכשירי השמיעה

בנוסף לאיסוף מידע ממגוון חיישנים לשיפור מובנות הדיבור, חיישנים המוטמעים במכשיר השמיעה יכולים להעריך את מאמץ ההאזנה ואת השפעתו על האדם, ולהשתמש בזה בכדי לדעת האם תהליך שיפור הדיבור אכן עוזר או לא, על פי לוולברהמפטון.

הפרויקט בן ארבע השנים שקיבל את ההשראה הקוגניטיבית 5G-IoT המאפשר מכשירי שמיעה רב-מודלים (COG-MHEAR), הוענק על ידי ה- EPSRC (מועצת המחקר למדעי ההנדסה והפיזיקה) 3.2 מיליון ליש"ט תחת הכיתוב 'טכנולוגיות רפואיות טרנספורמטיביות עבור תוכנית 2050 '.

עיבוד ענן ישמש בתחילה להפחתת צריכת החשמל, עם ממשקי חביון נמוכים (<10ms) שנוצרו עבור קישור תשתית הענן כדי למנוע עיכובים בין נתונים אקוסטיים לנתוני תמונה מעובדים.

אלקטרוניקה גמישה לעור אלקטרוני ואנטנות מותאמות אישית מתוכננות לשמור על מכשירים שחוקים.

כדי לטפל בבעיות כוח, גודל ואחרות, הכוונה לטווח הארוך היא לבצע את כל העיבודים באופן מקומי, ולהפעיל אלגוריתמים על חומרה ייעודית הכוללת מאיצים.

"החזון שלנו 2050 הוא מעבר ל -5 G-IoT ולאינטרנט, לצורך עיבוד שבבי דמוי מוח שאינו תלוי באינטרנט כדי לטפל בגודל מכשירי שמיעה, תקציב כוח, תקשורת ואבטחת סייבר", אמר סגן מנהל הפרויקט, אחסן איידל, מאוניברסיטת וולברהמפטון (בתמונה).

איסוף מידע חזותי - סרטונים של תנועת שפתיים, למשל - יכול להכניס בעיות פרטיות. "אנו יכולים להתגבר על חלק מהשאלות הללו על ידי הצפנת הנתונים ברגע שנאספו, ואנחנו נתקדם בגישות לעיבוד והבנת נתוני הווידאו בזמן שהם נשארים מוצפנים", על פי הגשת המענק של EPSRC. "אנו שואפים לעולם לא לגשת לנתוני הווידאו הגולמיים, אך עדיין להשתמש בהם כמקור מידע שימושי. כדי להשלים זאת, נבדוק גם שיטות לקריאת שפתיים מרחוק ללא שימוש בהזנת וידיאו, במקום לחקור את השימוש באותות רדיו לניטור מרחוק. "

יחד עם אוניברסיטת אדינבורו נאפייר ואוניברסיטת וולברהמפטון, השותפים בפרויקט כוללים: אוניברסיטת אדינבורו, אוניברסיטת גלזגו, אוניברסיטת הריוט-וואט, אוניברסיטת מנצ'סטר, אוניברסיטת נוטינגהאם, סונובה, נוקיה בל-מעבדות. נתוני אלפא. מכון דיגיטלי לבריאות וטיפול, מעבדת הנתונים וסקוטלנד החירשת ופעולה בנושא אובדן שמיעה.