Робот использует тактильный язык жестов, чтобы помочь слепоглухим людям общаться самостоятельно

Обновление: 5 августа 2021 г.
Робот использует тактильный язык жестов, чтобы помочь слепоглухим людям общаться самостоятельно

Роботизированный манипулятор, созданный Джонсоном, аспирантом-биоинженером из Северо-Восточного университета, предназначен для создания тактильного языка жестов, чтобы обеспечить большую независимость глухим и слепым людям. Лард - один из членов сообщества слепоглухих, которое помогает Джонсон тестировать робота и дает ей отзывы о том, как его можно улучшить.

Глухие люди могут общаться со своими слышащими друзьями и семьей с помощью языка визуальных жестов, но для глухих и слепых людей язык должен быть тем, к чему они могут прикоснуться. Это означает, что глухим и слепым людям часто требуется, чтобы переводчик лично присутствовал с ними для общения с людьми, не знающими американского языка жестов, чтобы они могли почувствовать, какую форму принимают их руки.

Целью разработки робота с тактильным языком жестов является создание чего-то, что можно было бы использовать для тех, кто полагается на американский язык жестов в качестве основного языка общения, чтобы иметь возможность общаться независимо, не полагаясь на интерпретацию другого человека. Она считает, что робот может быть полезен дома, в кабинете врача или в других местах, где кому-то может понадобиться личное общение или переводчик может быть недоступен.

Джонсон все еще находится на ранних стадиях разработки робота, работая над ним в качестве своей диссертации с Кьярой Беллини, доцентом кафедры биоинженерии в Северо-Востоке, в качестве ее консультанта. Прямо сейчас Джонсон сосредотачивается на буквах американского ручного алфавита и обучает робота вводить по буквам некоторые базовые слова.

Конечная цель - научить робота свободно говорить на американском языке жестов, чтобы устройство могло подключаться к текстовым communication такие системы, как электронная почта, текстовые сообщения, социальные сети или книги. Идея состоит в том, что робот сможет подписывать эти сообщения или тексты для пользователя. Джонсон также хотел бы сделать робота настраиваемым, поскольку, как и в любом другом языке, в разных регионах используются уникальные знаки, слова или фразы, а также некоторые знаки, которые означают разные вещи в зависимости от культурного контекста.