WaveGlove: ถุงมือที่มีเซ็นเซอร์เฉื่อยห้าตัวสำหรับการรู้จำท่าทางมือ

อัปเดต: 15 มิถุนายน 2021
WaveGlove: ถุงมือที่มีเซ็นเซอร์เฉื่อยห้าตัวสำหรับการรู้จำท่าทางมือ

ในช่วงสองสามทศวรรษที่ผ่านมา นักวิทยาศาสตร์คอมพิวเตอร์ได้พัฒนารูปแบบและวิธีการที่หลากหลายเพื่อวิเคราะห์พฤติกรรมและการสื่อสารของมนุษย์ในแง่มุมต่างๆ เช่น คำพูด อารมณ์ และท่าทาง เทคนิคที่มีอยู่ส่วนใหญ่สำหรับการจดจำท่าทางด้วยมือนั้นอาศัยการใช้เทคโนโลยีที่สวมใส่ได้กับเครื่องเดียว เซ็นเซอร์ และรับรู้ได้เฉพาะท่าทางพื้นฐานจำนวนจำกัดเท่านั้น

นักวิจัยจาก Comenius University Bratislava ในสโลวาเกียได้พัฒนา WaveGlove ซึ่งเป็นระบบใหม่สำหรับการรู้จำท่าทางมือที่ใช้เซ็นเซอร์เฉื่อยหลายตัวแทนที่จะเป็นเซ็นเซอร์ตัวเดียว ระบบใหม่นี้เป็นถุงมือที่มีเซ็นเซอร์เฉื่อยวางอยู่บนนิ้วแต่ละนิ้ว

"เอกสารล่าสุดของเราแสดงการใช้เซ็นเซอร์เฉื่อยหลายตัวสำหรับการรู้จำท่าทางมือ (HGR)" นักวิจัยคนหนึ่งที่ทำการศึกษากล่าว “ด้วยการสร้างต้นแบบฮาร์ดแวร์แบบกำหนดเองและเสนอโมเดลที่ใช้ Transformer ใหม่ (สถาปัตยกรรมเครือข่ายซึ่งประสบความสำเร็จอย่างมากในงานประมวลผลภาษาธรรมชาติ) เราแสดงให้เห็นว่าการใช้เซ็นเซอร์หลายตัวสามารถมีผลกระทบอย่างมีนัยสำคัญต่อความถูกต้องของการจำแนกประเภทและช่วยให้ เพื่อคำศัพท์ที่สมบูรณ์ยิ่งขึ้นของท่าทาง”

การใช้ WaveGlove ซึ่งเป็นระบบจดจำท่าทางมือที่พวกเขาสร้างขึ้น นักวิจัยสามารถรับชุดข้อมูลสองชุดที่มีตัวอย่างท่าทางมือมากกว่า 11000 ตัวอย่าง จากนั้นพวกเขาจึงออกแบบคำศัพท์ด้วยท่าทางที่แตกต่างกันสองคำ โดยคำแรกประกอบด้วยการเคลื่อนไหวด้วยมือเปล่าทั้งหมด 8 รูปแบบ (WaveGlove-single) และอีกคำหนึ่งประกอบด้วยท่าทางมือที่ซับซ้อนกว่า 10 รูปแบบและได้รับการออกแบบมาอย่างดี ซึ่งแต่ละนิ้วจะขยับต่างกัน

การมีอยู่ของเซ็นเซอร์หลายตัวช่วยให้เราออกแบบและจำแนกคำศัพท์ของท่าทางสัมผัสได้ละเอียดยิ่งขึ้นเมื่อเปรียบเทียบกับเซ็นเซอร์แบบใช้มือถือเครื่องเดียว ท่าทางสัมผัสที่เราจัดประเภทโดยใช้เซ็นเซอร์หลายตัวจะคล้ายกับท่าทางที่เราใช้ในชีวิตประจำวันอยู่แล้ว ทำให้การใช้อุปกรณ์อย่าง WaveGlove ง่ายขึ้นและเป็นธรรมชาติมากขึ้น

นอกเหนือจากการรวบรวมชุดข้อมูลของท่าทางมือและการยืนยันประสิทธิภาพของระบบ WaveGlove แล้ว นักวิจัยยังได้เปรียบเทียบวิธีการจำแนกประเภทการจดจำท่าทางมือมากกว่า 10 วิธี ซึ่งบางส่วนได้พัฒนาขึ้นโดยเป็นส่วนหนึ่งของการวิจัยครั้งก่อน พวกเขาประเมินวิธีการเหล่านี้ในชุดข้อมูลต่างๆ มากมาย เนื่องจากพวกเขาหวังว่าจะช่วยสร้างมาตรฐานผลลัพธ์ในด้านการรับรู้ท่าทางของมือ

ผลการวิจัยที่รวบรวมโดยทีมนักวิจัยนี้อาจมีความหมายอันมีค่ามากมาย ประการแรก งานของพวกเขาสามารถให้ข้อมูลการวิจัยโดยมุ่งเน้นที่การจดจำท่าทางของมือและช่วยปรับปรุงระบบที่มีอยู่ ประการที่สอง ต้นแบบ WaveGlove ที่พวกเขาสร้างขึ้นสามารถนำมาใช้เพื่อปรับปรุงการสื่อสารระหว่างมนุษย์และ เครื่องทำให้คนหลังตีความท่าทางมือมนุษย์ได้ดีขึ้น