Partnerschap levert AI-gebaseerde 3D-detectie-referentieontwerpen voor AIoT-apparaten op

Update: 29 mei 2021

Ambarella, Inc., Lumentum en ON claimen de eerste benaderingen in de branche voor biometrische toegangscontrole, elektronische 3D-sloten en intelligente detectie in verticale markten. Halfgeleider hebben twee gezamenlijke AI-gebaseerde 3D-detectie-referentieontwerpen ontwikkeld die zijn ontworpen om de implementatie van AIoT-apparaten te versnellen. Deze referentieontwerpen - Saturn voor elektronische sloten en Vision + voor biometrische toegangscontrolelezers - bouwen voort op de eerdere gezamenlijke oplossing van het bedrijf voor contactloze toegangssystemen.

De referentieontwerpen maken gebruik van Lumentum's hoogwaardige VCSEL-arrayverlichting en een ON Halfgeleider beeld sensor met behulp van Ambarella's AI SoC. Het resultaat is een hogere nauwkeurigheid en intelligentere besluitvorming voor biometrische toegangscontrole, elektronische 3D-sloten en andere intelligente detectietoepassingen. Bovendien verlaagt het hoge integratieniveau het stroomverbruik van het systeem en de thermische ontwerpvereisten aanzienlijk, en maakt het veel kleinere productvormfactoren mogelijk, zei Ambarella.

Naast de gerichte toepassingen voor biometrische toegangscontrole en elektronische sloten, kunnen deze nieuwe referentieontwerpen worden gebruikt in toepassingen in slimme steden, slimme gebouwen, slimme huizen en intelligente gezondheidszorg.

Afbeelding: Ambarella

De nieuwe referentieontwerpen zijn een natuurlijke voortzetting van de vorige samenwerking, zei William Xu, marketingdirecteur van Ambarella. "Ons eerste gezamenlijke referentieontwerp, Janus genaamd, werd geïntroduceerd in 2020. Het was de eerste gestructureerde lichtoplossing met één camera in de branche voor biometrische toegangscontrolelezers, evenals toepassingen voor tijdregistratie en mobiele betalingen."

Xu zei dat latere overeenkomsten met OEM's hebben geleid tot de ontwikkeling van zijn eerste nieuwe gezamenlijke referentieontwerp, Saturn, voor horecasloten en residentiële toepassingen.

De bedrijven beweren dat het Saturn-referentieontwerp het eerste in de AIoT-industrie is dat AI-verwerking integreert voor zowel gestructureerde lichtdetectie met één camera als snel opstartende videoverwerking. Gebaseerd op de Ambarella CV25 CVflow AI vision-processor, bevat het een camera met gestructureerd licht, aangedreven door Lumentum's VCSEL technologie en de AR0237CS 2 MP RGB-IR-beeldsensor van ON Semiconductor.

"Tegelijkertijd werd het duidelijk dat OEM's een compleet productportfolio nodig hadden, voor applicaties / implementaties die een hogere resolutie vereisen, ook voor anti-spoofing en een groter bereik", zei hij. “De drie bedrijven werkten weer samen voor ons tweede nieuwe gezamenlijke referentieontwerp, genaamd Vision +. Voor dit referentieontwerp heeft ON Semiconductor een nieuwe 4K RGB-IR-beeldsensor gebouwd, heeft Lumentum zijn VCSEL-verlichtingsoplossing geüpgraded om langere afstanden voor 3D-detectie te ondersteunen, en hebben we Ambarella's CV22 AI vision SoC gebruikt om de beeldsignaal- en AI-verwerking van dit referentieontwerp te ondersteunen vereisten."

Het Vision+-referentieontwerp is gericht op biometrische toegangscontrolelezers. Beweerd als de eerste 4K-oplossing van de AIoT-industrie om gestructureerde lichtdetectie met één camera en 940 nm uit te voeren op basis van RGB-IR-technologie, wordt ook gezegd dat het de eerste is die gebruikmaakt van een oplossing met één chip voor diepteverwerking, AI-verwerking, en videoverwerking. Het is gebaseerd op de Ambarella CV22 CVflow AI vision-processor en omvat gestructureerde lichtdetectie met één camera, aangedreven door Lumentum's VCSEL-technologie, met een bereik van twee meter, en een 4K (8MP) RGB-IR CMOS-beeldsensor van ON Semiconductor.

Naast de twee referentieontwerpen zijn er ontwikkelingskits voor 3D-detectie beschikbaar, die tegemoetkomen aan verschillende toepassingsspecifieke vereisten. Voor intelligente detectietoepassingen kunnen Ambarella's CV2-serie CVflow AI vision-processorgebaseerde ontwikkelingskits worden geleverd met ToF-sensoradapters die worden aangedreven door Lumentum's VCSEL-arrays. Een optionele 4K RGB-IR-beeldsensoradapter is ook beschikbaar.

Xu zei dat de combinatie van de gezamenlijke referentieontwerpen en ontwikkelingskits OEM's nu in staat stelt om een ​​complete productroadmap van slimme bouwtoepassingen te bouwen. Deze omvatten schuifdeursensoren, biometrische toegangscontrolelezers, anti-bumperklevende apparaten voor verbeterde beveiliging en aanwezigheidsdetectiecamera's die realtime informatie over de bezettingsgraad bieden voor besluitvorming.

Klik voor grotere afbeelding. (Afbeelding: Ambarella)

Bovendien maakt de open software development kit (SDK) voor Ambarella's CVflow AI vision-processors de integratie van applicaties van derden mogelijk. Het stelt OEM's ook in staat om met één platform aan verschillende regionale vereisten te voldoen (bijvoorbeeld door verschillende AI-algoritmen in verschillende regio's te gebruiken).

De op Linux gebaseerde SDK biedt een reeks functies, waaronder ondersteuning voor verschillende 3D-modaliteiten zoals gestructureerd licht en ToF, ingebouwde Arm-processors, een geïntegreerde ISP voor uitdagende scènes, waaronder een hoog dynamisch bereik en weinig licht, en hoge AI-inferentie mogelijkheden op het camera-apparaat om meerdere neurale netwerken tegelijk te laten werken. Geïntegreerde beveiliging omvat veilig opstarten, OTP om coderingssleutels op te slaan en Arm TrustZone-technologie voor veilige vergelijkingen van coderingssleutels.

De SDK biedt ook mogelijkheden voor aangepaste applicatie-ontwikkeling en AI-tools om de ontwikkeling en migratie van deep neurale netwerken (DNN) te ondersteunen. De gezamenlijke referentieontwerpen en ontwikkelingskits zullen naar verwachting in juni verkrijgbaar zijn bij Ambarella.

over AmbarellaLumentumON Semiconductor