Congatec onthult een snelle weg naar NPU versnelde smart vision

congatec, de embedded en edge computing technologie specialist, heeft zijn i.MX 8-ecosysteem uitgebreid met een nieuwe starterset voor AI-versnelde intelligente embedded vision-toepassingen.

Gebaseerd op een SMARC Computer-on-Module met i.MX 8M Plus-processor is de 'sweet spot' van de starterset het gebruik van de nieuwe processor-geïntegreerde NXP Neural Processing Unit (NPU).

Het levert tot 2.3 TOPS aan prestaties voor op deep learning gebaseerde kunstmatige intelligentie, het kan inferentie-engines en bibliotheken zoals Arm Neural Network (NN) en TensorFlow Lite draaien. Het integreert ook naadloos met Basler embedded vision-software om OEM's een applicatieklaar oplossingsplatform te bieden voor de ontwikkeling van AI-versnelde embedded vision-systemen van de volgende generatie.

Typische toepassingen lopen uiteen, van prijsgevoelige geautomatiseerde kassaterminals in de detailhandel tot de veiligheid van gebouwen, en van zicht in voertuigen voor navigatie tot bewakingssystemen in bussen. Voorbeelden van industriële toepassingen zijn HMI's met op zicht gebaseerde gebruikersidentificatie en op gebaren gebaseerde machinebediening, evenals vision-ondersteunde robotica en industriële kwaliteitsinspectiesystemen.

“Een speciale verwerkingseenheid voor neurale algoritmen die wordt ondersteund door open source AI-softwareoplossingen zoals TensorFlow, is een efficiëntieversneller voor veel op visie gebaseerde systemen. En wanneer dit alles is geïntegreerd als een applicatieklaar, hardware- en softwaregevalideerd platform, inclusief Basler pylon Camera Software Suite, zet het ontwikkelaars op een snel spoor bij het ontwerpen van NPU-versnelde smart vision-applicaties”, legt Martin Danzer, Director Product Management bij congatec, uit.

De Basler pylon Camera Software Suite levert een uniforme SDK voor BCON voor MIPI, USB3 vision en GigE vision camera's, en maakt cameratoegang mogelijk vanaf broncode, GUI of software van derden. De krachtige pyloonviewer is bedoeld voor camera-evaluatie.

Dankzij de integratie in de congatec i.MX 8M Plus-startset voor AI-geaccelereerde vision-toepassingen, krijgen ingenieurs direct toegang tot belangrijke AI-ondersteunde machine vision-functies zoals triggering, individuele beeldopname en zeer gedifferentieerde cameraconfiguratie-opties plus eenvoudige toegang tot aangepaste inferentie-algoritmen op basis van het Arm NN- en TensorFlow Lite-ecosysteem.

Het hart van de set is de SMARC 2.1 Computer-on-Module conga-SMX8-Plus met 4 Arm Cortex-A53-kernen, 1x Arm Cortex-M72-controller en de NXP NPU om deep learning-algoritmen te versnellen en wordt geleverd met passieve koeling.

De 3.5-inch draagkaart conga-SMC1/SMARC-ARM verbindt de 13 MP Basler dart daA4200-30mci BCON voor MIPI-camera rechtstreeks met een F1.8 f4mm-lens via MIPI CSI-2.0 zonder extra convertermodules. Naast MIPI CSI-2.0 worden ook USB en GigE vision camera's ondersteund.

Wat de software betreft, heeft congatec een opstartbare SD-kaart geleverd met een vooraf geconfigureerde bootloader, Yocto OS-image, bijpassende BSP's en voor processor geoptimaliseerde Basler embedded vision-software die directe AI-inferentietraining mogelijk maakt op basis van vastgelegde afbeeldingen en videosequenties.