다중 모드 AI 솔루션은 임베디드 비전 시스템에서 스마트 음성 설계를 용이하게 합니다.

업데이트: 4년 2021월 XNUMX일

Renesas Electronics Corp.과 Syntiant Corp.는 비전 AI 기반 IoT 및 에지 시스템에서 이미지 처리를 위한 저전력 비접촉 작동을 가능하게 하는 음성 제어 다중 모드 인공 지능(AI) 솔루션을 공동으로 개발했습니다. 다중 모드 AI 솔루션의 응용 프로그램에는 자동 계산대, 보안 카메라, 화상 회의 시스템 및 로봇 청소 장치와 같은 스마트 기기가 포함됩니다.

음성 및 이미지 처리 기능을 제공하는 이 솔루션은 Renesas RZ/V 시리즈 비전 AI 마이크로프로세서 유닛(MPU)과 저전력 다중 모드 Syntiant NDP120 신경 결정 프로세서를 결합합니다. 공동 솔루션은 대기 모드에서 음성으로 트리거되는 빠른 활성화와 함께 항상 켜져 있는 기능을 제공하여 물체 인식, 얼굴 인식 및 기타 비전 기반 작업을 수행합니다.

(출처: Renesas Electronics)

인용된 응용 사례 중 하나는 활성화 및 시스템 작동을 유도하는 사용자 정의 음성 신호이며, 비전 AI 인식은 작업자 행동을 추적하고 작동을 제어하거나 의심스러운 작업이 감지되면 경고를 발행합니다.

(이미지: 르네사스 일렉트로닉스)

Renesas는 "다중 모드 아키텍처를 사용하면 비전 AI 기반 시스템을 위한 비접촉 사용자 경험을 더 쉽게 생성할 수 있습니다. “음성인식을 위한 전력 효율적인 전용 칩을 사용하면 비전 AI 기능과 독립적으로 소프트웨어를 개발할 수 있어 시스템 개발 속도를 높이는 동시에 대기 전력 소비를 줄입니다.”

비전 AI용 Renesas RZ/V 시리즈 MPU는 회사의 동적으로 재구성 가능한 프로세서 AI(DRP-AI) 가속기를 통합하고 고정밀 AI 추론과 높은 전력 효율성을 결합합니다. 이러한 전력 성능은 방열판이나 냉각 팬과 같은 열 관리 장치의 필요성을 없애고 BOM(Bill of Material) 비용을 줄이고 비전 AI를 광범위한 임베디드 애플리케이션에 통합할 수 있게 해준다고 Renesas는 말했습니다.

(이미지: 르네사스 일렉트로닉스)

Syntiant NDP120 칩은 화자 인식, 키워드 감지, 다중 깨우기 단어 및 로컬 명령 인식을 포함하여 고정밀 핸즈프리 음성 기능을 구현하는 데 사용할 수 있는 고급 AI 기능을 통합합니다. Syntiant Core 120 신경망 추론 엔진과 함께 패키징된 NDP2은 전력 소비를 1mW 배터리 전력으로 최소화하면서 동시에 여러 애플리케이션을 실행할 수도 있습니다.

음성 제어 다중 모드 AI 솔루션은 Renesas 포트폴리오의 여러 상호 호환 장치를 사용하며 아날로그, 전력 및 임베디드 처리 제품 조합을 특징으로 하는 회사의 Winning Combinations 참조 설계의 일부입니다. 회로도 및 BOM 목록을 포함하여 다중 모드 AI 솔루션에 대한 참조 설계를 지금 사용할 수 있습니다.

Renesas Electronics America 정보