القلادة الذكية يمكنها تتبع تعابير وجهك التفصيلية

تحديث: 2 أغسطس 2021
القلادة الذكية يمكنها تتبع تعابير وجهك التفصيلية

تنقل حركات الوجه البشرية المشاعر وتساعدنا على التواصل غير اللفظي وأداء الأنشطة البدنية ، مثل الأكل والشرب. يعد تتبع حركات الوجه وربما سببها أحد التطبيقات المقترحة لـ NeckFace ، وهي واحدة من أولى تقنيات الاستشعار القابلة للارتداء من نوع القلادة الذكية. قام فريق بقيادة Cheng Zhang ، الأستاذ المساعد في علوم المعلومات في كلية Cornell Ann S. Bowers للحوسبة وعلوم المعلومات ، بتطوير NeckFace ، والذي يمكنه باستمرار تتبع تعابير الوجه الكاملة باستخدام كاميرات الأشعة تحت الحمراء لالتقاط صور الذقن والوجه من تحت العنق. تم تفصيل عملهم في "NeckFace: التعقب المستمر لتعبيرات الوجه الكاملة على الأجهزة القابلة للارتداء المثبتة على الرقبة"

NeckFace هو الجيل التالي من عمل Zhang السابق ، والذي نتج عنه C-Face ، وهو جهاز مشابه ولكن بتنسيق سماعة رأس. قال تشانغ إن NeckFace يوفر تحسنًا كبيرًا في الأداء والخصوصية ، ويمنح مرتديها خيارًا أقل اقتحامًا للجهاز المثبت على الرقبة.

بالإضافة إلى إمكانية تتبع المشاعر، يرى تشانغ العديد من التطبيقات لهذا الغرض التكنلوجيا: عقد المؤتمرات الافتراضية عندما لا تكون الكاميرا الأمامية خيارًا متاحًا؛ الكشف عن تعبيرات الوجه في سيناريوهات الواقع الافتراضي؛ والتعرف على الكلام الصامت.

قال تشانغ ، الباحث الرئيسي في مختبر SciFi ، "الهدف النهائي هو جعل المستخدم قادرًا على تتبع سلوكياته ، من خلال التتبع المستمر لحركات الوجه". "ونأمل أن يخبرنا هذا بالكثير من المعلومات حول نشاطك البدني وأنشطتك العقلية."

قال Guimbretière إن NeckFace لديه أيضًا القدرة على تغيير مؤتمرات الفيديو.

قال: "لن يحتاج المستخدم إلى توخي الحذر للبقاء في مجال رؤية الكاميرا". "بدلاً من ذلك ، يمكن لـ NeckFace إعادة إنشاء لقطة الرأس المثالية أثناء تحركنا في فصل دراسي ، أو حتى المشي بالخارج لمشاركة المشي مع صديق بعيد."

لاختبار فعالية NeckFace ، أجرى Zhang ومعاونوه دراسة مستخدم مع 13 مشاركًا ، طُلب من كل منهم أداء ثمانية تعابير وجه أثناء الجلوس وثمانية تعبيرات أخرى أثناء المشي. في سيناريوهات الجلوس ، طُلب من المشاركين أيضًا تدوير الرأس أثناء أداء تعابير الوجه ، وإزالة الجهاز وإعادة تحميله في جلسة واحدة.

تم اختبار NeckFace في تصميمين: شريط للرقبة ، ملفوف حول مؤخرة العنق بكاميرات مزدوجة أسفل مستوى الترقوة مباشرة ؛ وقلادة ذكية ، بها جهاز كاميرا يعمل بالأشعة تحت الحمراء (IR) يشبه قلادة معلقة أسفل العنق.

جمعت المجموعة بيانات خط الأساس لحركة الوجه باستخدام كاميرا TrueDepth 3D على جهاز iPhone X ، ثم قارنت ذلك بالبيانات التي تم جمعها باستخدام NeckFace. بين تعبيرات الجلوس والمشي والرجوع ، عبّر المشاركون في الدراسة عن ما مجموعه 52 شكلاً للوجه.

باستخدام الحسابات التي تتضمن التعلم العميق ، حددت المجموعة أن NeckFace اكتشف حركة الوجه بنفس دقة القياسات المباشرة باستخدام كاميرا الهاتف. قال الباحثون إنه تم العثور على رباط العنق أكثر دقة من القلادة الذكية ، ربما لأن كاميرتين على رباط العنق يمكن أن تلتقطان معلومات من كلا الجانبين أكثر مما يمكن للكاميرا المثبتة في المنتصف.

قال تشانغ إن الجهاز ، عند تحسينه ، يمكن أن يكون مفيدًا بشكل خاص في مجال الصحة العقلية ، لتتبع مشاعر الناس على مدار اليوم. في حين أن الناس لا يلبسون عواطفهم دائمًا على وجوههم ، كما قال ، فإن مقدار تغير تعبيرات الوجه بمرور الوقت يمكن أن يشير إلى تقلبات عاطفية.

"هل يمكننا في الواقع أن نرى كيف تختلف مشاعرك على مدار اليوم؟" هو قال. "مع هذا التكنلوجيا، يمكن أن يكون لدينا قاعدة بيانات عن أدائك الجسدي والعقلي على مدار اليوم ، وهذا يعني أنه يمكنك تتبع سلوكياتك الخاصة. وأيضًا ، يمكن للطبيب استخدام المعلومات لدعم القرار ".