컴퓨터 입술 읽기는 보청기를 향상시킬 수 있습니다

업데이트: 30년 2021월 XNUMX일
컴퓨터 입술 읽기는 보청기를 향상시킬 수 있습니다

음성 명료도를 향상시키기 위해 다양한 센서로부터 정보를 수집 할뿐만 아니라 보청기에 내장 된 센서는 청취 노력과 사람에 대한 영향을 추정 할 수 있으며이를 사용하여 음성 향상 프로세스가 실제로 도움이되는지 여부를 알 수 있습니다. 울버햄튼으로.

'인지에서 영감을받은 5G-IoT 지원 멀티 모달 보청기'(COG-MHEAR)로 명명 된이 3.2 년 프로젝트는 EPSRC (Engineering and Physical Sciences Research Council)에서 'Transformative Healthcare Technologies for 2050 '계획.

클라우드 처리는 초기에 전력 소비를 줄이기 위해 사용되며, 클라우드 인프라 링크에 대해 생성 된 낮은 (<10ms) 대기 시간 인터페이스를 통해 음향 데이터와 처리 된 이미지 데이터 간의 지연을 방지합니다.

유연한 e-skin 전자 제품과 맞춤형 안테나는 마모 된 장치를 작게 유지하도록 계획되어 있습니다.

전력, 크기 및 대기 시간 문제를 해결하기 위해 장기적인 목적은 가속기를 포함하는 전용 하드웨어에서 알고리즘을 실행하여 로컬에서 모든 처리를 수행하는 것입니다.

"우리의 비전 2050은 보청기 크기, 전력 예산, 통신 및 사이버 보안 문제를 해결하기 위해 인터넷 독립적 인 뇌와 같은 온칩 프로세싱을 위해 5G-IoT 및 인터넷을 넘어서는 것입니다."라고 University of University의 Ahsan Adeel 프로젝트 부국장이 말했습니다. 울버햄프턴 (사진).

예를 들어 입술 움직임 비디오와 같은 시각 정보를 수집하면 개인 정보 문제가 발생할 수 있습니다. EPSRC 보조금 제출에 따르면 "데이터가 수집되는 즉시 암호화하여 이러한 질문 중 일부를 극복 할 수 있으며, 비디오 데이터가 암호화 된 상태로 유지되는 동안 처리 및 이해를위한 접근 방식을 개척 할 것입니다." “우리는 원시 비디오 데이터에 액세스하지 않고 유용한 정보 소스로 사용하는 것을 목표로합니다. 이를 보완하기 위해 우리는 원격 모니터링을위한 무선 신호 사용을 탐색하는 대신 비디오 피드를 사용하지 않고 원격 입술 읽기를위한 방법도 조사 할 것입니다.”

에딘버러 네이피어 대학교 및 울버햄프턴 대학교와 함께 프로젝트 파트너로는 에든버러 대학교, 글래스고 대학교, 헤리엇 와트 대학교, 맨체스터 대학교, 노팅엄 대학교, 소 노바, 노키아 벨 랩스가 있습니다. 알파 데이터. Digital Health & Care Institute, The Data Lab and Deaf Scotland, Action on Hearing Loss.