Un partenariat donne des conceptions de référence de détection 3D basées sur l'IA pour les appareils AIoT

Mise à jour : 29 mai 2021

Revendiquant les premières approches de l'industrie pour le contrôle d'accès biométrique, les serrures électroniques 3D et la détection intelligente sur les marchés verticaux, Ambarella, Inc., Lumentum et ON Semi-conducteurs ont développé deux conceptions de référence de détection 3D basées sur l'IA qui sont conçues pour accélérer le déploiement des appareils AIoT. Ces conceptions de référence – Saturn pour les serrures électroniques et Vision+ pour les lecteurs de contrôle d'accès biométriques – s'appuient sur la précédente solution commune des sociétés pour les systèmes d'accès sans contact.

Les conceptions de référence exploitent les illuminateurs réseau VCSEL hautes performances de Lumentum et un ON Semi-conducteurs image capteur en utilisant le SoC AI d'Ambarella. Le résultat est des niveaux de précision plus élevés et une prise de décision plus intelligente pour le contrôle d'accès biométrique, les serrures électroniques 3D et d'autres applications de détection intelligentes. En outre, le haut niveau d'intégration réduit considérablement la consommation d'énergie du système et les exigences de conception thermique, tout en permettant des facteurs de forme de produit beaucoup plus petits, a déclaré Ambarella.

En plus des applications ciblées de contrôle d'accès biométrique et de verrouillage électronique, ces nouvelles conceptions de référence peuvent être utilisées dans des applications trouvées dans les villes intelligentes, les bâtiments intelligents, les maisons intelligentes et les soins de santé intelligents.

Image : Ambarella

Les nouveaux designs de référence sont une progression naturelle de la collaboration précédente, a déclaré William Xu, directeur du marketing, Ambarella. « Notre première conception de référence commune, appelée Janus, a été introduite en 2020. Il s'agissait de la première solution de lumière structurée à caméra unique du secteur pour les lecteurs de contrôle d'accès biométriques, ainsi que pour les applications de pointage et de paiement mobile. »

Xu a déclaré que les engagements ultérieurs avec les OEM ont conduit au développement de sa première nouvelle conception de référence commune, Saturn, qui est destinée aux serrures d'accueil et aux applications résidentielles.

Les sociétés affirment que la conception de référence Saturn est la première du secteur de l'AIoT à intégrer le traitement de l'IA pour la détection de lumière structurée par caméra unique et le traitement vidéo à démarrage rapide. Basé sur le processeur de vision Ambarella CV25 CVflow AI, il comprend une caméra à lumière structurée alimentée par le VCSEL de Lumentum. sans souci et le capteur d'image RVB-IR AR0237CS 2 MP d'ON Semiconductor.

« Dans le même temps, il est devenu évident que les OEM avaient besoin d'un portefeuille de produits complet, pour les applications/déploiements nécessitant une résolution plus élevée, y compris pour l'anti-usurpation et une plus longue portée », a-t-il déclaré. « Les trois sociétés ont à nouveau collaboré pour notre deuxième nouveau design de référence commun, appelé Vision+. Pour cette conception de référence, ON Semiconductor a construit un nouveau capteur d'image RVB-IR 4K, Lumentum a mis à niveau sa solution d'éclairage VCSEL pour prendre en charge des distances plus longues pour la détection 3D, et nous avons utilisé le SoC de vision AI CV22 d'Ambarella pour prendre en charge le traitement du signal d'image et de l'IA de cette conception de référence. conditions."

La conception de référence Vision+ cible les lecteurs de contrôle d'accès biométriques. Considéré comme la première solution 4K de l'industrie de l'AIoT à effectuer une détection de lumière structurée 940 nm à une seule caméra basée sur la technologie RVB-IR, il est également considéré comme le premier à tirer parti d'une solution à puce unique pour le traitement en profondeur, le traitement de l'IA, et le traitement vidéo. Basé sur le processeur de vision Ambarella CV22 CVflow AI, il comprend une détection de lumière structurée à caméra unique alimentée par la technologie VCSEL de Lumentum, avec une portée de deux mètres, et un capteur d'image CMOS RVB-IR 4K (8MP) d'ON Semiconductor.

En plus des deux conceptions de référence, des kits de développement de détection 3D sont disponibles, répondant à différentes exigences spécifiques aux applications. Pour les applications de détection intelligentes, les kits de développement basés sur le processeur de vision CVflow AI de la série CV2 d'Ambarella peuvent être fournis avec des adaptateurs de capteur ToF alimentés par les matrices VCSEL de Lumentum. Un adaptateur de capteur d'image RVB-IR 4K en option est également disponible.

Xu a déclaré que la combinaison des conceptions de référence communes et des kits de développement permet désormais aux OEM de créer une feuille de route complète des produits d'applications de construction intelligente. Ceux-ci incluent des capteurs de porte coulissante, des lecteurs de contrôle d'accès biométriques, des dispositifs anti-filetage pour une sécurité renforcée et des caméras de détection d'occupation qui fournissent une intelligence d'occupation en temps réel pour la prise de décision.

Cliquez pour agrandir l'image. (Image: Ambarella)

De plus, le kit de développement logiciel ouvert (SDK) pour les processeurs de vision CVflow AI d'Ambarella permet l'intégration d'applications tierces. Il permet également aux OEM de répondre aux différentes exigences régionales avec une seule plate-forme (par exemple, en utilisant différents algorithmes d'IA dans différentes régions).

Le SDK basé sur Linux offre une gamme de fonctionnalités, y compris la prise en charge de différentes modalités 3D telles que la lumière structurée et le ToF, les processeurs Arm intégrés, un FAI intégré pour gérer les scènes difficiles, y compris la plage dynamique élevée et la faible luminosité, et l'inférence élevée de l'IA capacités sur la caméra pour activer plusieurs réseaux de neurones fonctionnant simultanément. La sécurité intégrée comprend un démarrage sécurisé, OTP pour stocker les clés de chiffrement et la technologie Arm TrustZone pour des comparaisons de clés de chiffrement sécurisées.

Le SDK offre également des capacités de développement d'applications personnalisées et des outils d'IA pour prendre en charge le développement et la migration de réseaux de neurones profonds (DNN). Les conceptions de référence communes et les kits de développement devraient être disponibles en juin auprès d'Ambarella.

à propos d'AmbarellaLumentumON Semiconductor