La partnership produce progetti di riferimento per il rilevamento 3D basati su AI per dispositivi AIoT

Aggiornamento: 29 maggio 2021

Rivendicare approcci innovativi nel settore per il controllo degli accessi biometrico, serrature elettroniche 3D e rilevamento intelligente nei mercati verticali, Ambarella, Inc., Lumentum e ON Semiconduttore hanno sviluppato due progetti di riferimento congiunti per il rilevamento 3D basati sull'intelligenza artificiale progettati per accelerare l'implementazione dei dispositivi AIoT. Questi progetti di riferimento – Saturn per le serrature elettroniche e Vision+ per i lettori di controllo degli accessi biometrici – si basano sulla precedente soluzione congiunta delle aziende per i sistemi di accesso senza contatto.

I progetti di riferimento sfruttano gli illuminatori array VCSEL ad alte prestazioni di Lumentum e un ON Semiconduttore Immagine sensore utilizzando il SoC AI di Ambarella. Il risultato sono livelli più elevati di precisione e un processo decisionale più intelligente per il controllo degli accessi biometrici, serrature elettroniche 3D e altre applicazioni di rilevamento intelligente. Inoltre, l'alto livello di integrazione riduce significativamente il consumo energetico del sistema e i requisiti di progettazione termica, oltre a consentire fattori di forma del prodotto molto più piccoli, ha affermato Ambarella.

Oltre al controllo degli accessi biometrico mirato e alle applicazioni di blocco elettronico, questi nuovi progetti di riferimento possono essere utilizzati in applicazioni che si trovano nelle città intelligenti, negli edifici intelligenti, nelle case intelligenti e nell'assistenza sanitaria intelligente.

Immagine: Ambarella

I nuovi progetti di riferimento sono una progressione naturale della precedente collaborazione, ha affermato William Xu, direttore del marketing, Ambarella. "Il nostro primo progetto di riferimento congiunto, chiamato Janus, è stato introdotto nel 2020. È stata la prima soluzione a luce strutturata a telecamera singola del settore per lettori di controllo degli accessi biometrici, nonché applicazioni di rilevazione presenze e pagamento mobile".

Xu ha affermato che i successivi impegni con gli OEM hanno portato allo sviluppo del suo primo nuovo progetto di riferimento comune, Saturn, che è per serrature per l'ospitalità e applicazioni residenziali.

Le aziende affermano che il progetto di riferimento Saturn è il primo del settore AIoT a integrare l'elaborazione AI sia per il rilevamento di luce strutturata a telecamera singola che per l'elaborazione video ad avvio rapido. Basato sul processore di visione Ambarella CV25 CVflow AI, include una telecamera a luce strutturata alimentata dal VCSEL di Lumentum la tecnologia e il sensore di immagine RGB-IR AR0237CS da 2 MP di ON Semiconductor.

"Allo stesso tempo, è diventato evidente che gli OEM avevano bisogno di un portafoglio di prodotti completo, per applicazioni/distribuzioni che richiedono una risoluzione più elevata, anche per l'anti-spoofing e un raggio più lungo", ha affermato. “Le tre aziende hanno nuovamente collaborato insieme per il nostro secondo nuovo progetto di riferimento congiunto, chiamato Vision+. Per questo progetto di riferimento, ON Semiconductor ha costruito un nuovo sensore di immagine 4K RGB-IR, Lumentum ha aggiornato la sua soluzione di illuminazione VCSEL per supportare distanze maggiori per il rilevamento 3D e abbiamo utilizzato il SoC di visione AI CV22 di Ambarella per supportare il segnale di immagine di questo progetto di riferimento e l'elaborazione AI requisiti."

Il progetto di riferimento Vision+ si rivolge a lettori di controllo accessi biometrici. Considerata la prima soluzione 4K del settore AIoT per eseguire il rilevamento della luce strutturata a 940 nm con telecamera singola basata sulla tecnologia RGB-IR, si dice anche che sia la prima a sfruttare una soluzione a chip singolo per l'elaborazione in profondità, l'elaborazione AI, ed elaborazione video. Basato sul processore di visione Ambarella CV22 CVflow AI, include il rilevamento della luce strutturata a telecamera singola alimentato dalla tecnologia VCSEL di Lumentum, con una portata di due metri e un sensore di immagine CMOS RGB-IR 4K (8MP) di ON Semiconductor.

Oltre ai due progetti di riferimento, sono disponibili kit di sviluppo per il rilevamento 3D, che soddisfano requisiti specifici delle diverse applicazioni. Per applicazioni di rilevamento intelligente, i kit di sviluppo basati su processori di visione CVflow AI serie CV2 di Ambarella possono essere forniti con adattatori per sensori ToF alimentati dagli array VCSEL di Lumentum. È disponibile anche un adattatore per sensore di immagine RGB-IR 4K opzionale.

Xu ha affermato che la combinazione dei progetti di riferimento congiunti e dei kit di sviluppo consente ora agli OEM di costruire una roadmap completa del prodotto per le applicazioni per edifici intelligenti. Questi includono sensori per porte scorrevoli, lettori di controllo degli accessi biometrici, dispositivi anti-tailgating per una maggiore sicurezza e telecamere di rilevamento dell'occupazione che forniscono informazioni sull'occupazione in tempo reale per il processo decisionale.

Clicca per l'immagine ingrandita. (Immagine: Ambarella)

Inoltre, il kit di sviluppo software aperto (SDK) per i processori di visione CVflow AI di Ambarella consente l'integrazione di applicazioni di terze parti. Consente inoltre agli OEM di soddisfare i diversi requisiti regionali con un'unica piattaforma (ad esempio, utilizzando diversi algoritmi di intelligenza artificiale in diverse regioni).

L'SDK basato su Linux offre una gamma di funzionalità, incluso il supporto per diverse modalità 3D come luce strutturata e ToF, processori Arm incorporati, un ISP integrato per gestire scene impegnative, tra cui alta gamma dinamica e scarsa illuminazione e alta inferenza AI funzionalità sul dispositivo della fotocamera per consentire l'esecuzione simultanea di più reti neurali. La sicurezza integrata include avvio protetto, OTP per archiviare chiavi di crittografia e tecnologia Arm TrustZone per confronti di chiavi di crittografia sicure.

L'SDK offre anche funzionalità di sviluppo di applicazioni personalizzate e strumenti di intelligenza artificiale per supportare lo sviluppo e la migrazione di reti neurali profonde (DNN). I progetti di riferimento congiunti e i kit di sviluppo dovrebbero essere disponibili a giugno da Ambarella.

su AmbarellaLumentumON Semiconductor