Congatec が NPU 加速スマート ビジョンへの近道を発表

congatec、組み込みおよびエッジコンピューティング テクノロジー スペシャリストである同社は、AI アクセラレーションによるインテリジェントな組み込みビジョン アプリケーション向けの新しいスターター セットで i.MX 8 エコシステムを拡張しました。

SMARC コンピュータオンに基づくモジュール i.MX 8M Plus プロセッサーを搭載したスターター セットの「スイート スポット」は、新しいプロセッサーに統合された NXP Neural Processing Unit (NPU) の利用です。

ディープラーニングベースの人工知能に最大2.3TOPSのパフォーマンスを提供し、Arm Neural Network（NN）やTensorFlowLiteなどの推論エンジンやライブラリを実行できます。 また、Basler組み込みビジョンソフトウェアとシームレスに統合して、OEMに次世代AI加速組み込みビジョンシステムの開発のためのアプリケーション対応ソリューションプラットフォームを提供します。

典型的なアプリケーションは、小売店の価格に敏感な自動チェックアウト端末から建物の安全性、ナビゲーション用の車載ビジョンからバスの監視システムまで、多岐にわたります。 産業のユースケースには、視覚ベースのユーザー識別とジェスチャーベースの機械操作を備えたHMIのほか、視覚をサポートするロボット工学と産業品質検査システムが含まれます。

「TensorFlowなどのオープンソースAIソフトウェアソリューションでサポートされているニューラルアルゴリズム専用の処理ユニットは、多くのビジョンベースのシステムの効率アクセラレータです。 そして、これらすべてがBasler pylon Camera Software Suiteを含む、アプリケーション対応のハードウェアおよびソフトウェア検証済みプラットフォームとして統合されると、開発者はNPU高速化スマートビジョンアプリケーションの設計に迅速に取り組むことができます」と、congatecの製品管理ディレクターであるMartinDanzer氏は説明します。

Basler pylon Camera Software Suiteは、MIPI、USB3ビジョンおよびGigEビジョンカメラ用のBCON用の統合SDKを提供し、ソースコード、GUI、またはサードパーティソフトウェアからのカメラアクセスを可能にします。 高性能パイロンビューアは、カメラの評価を目的としています。

AIアクセラレーションビジョンアプリケーション用のcongateci.MX 8M Plusスターターセットに統合されているため、エンジニアは、トリガー、個別の画像キャプチャ、高度に差別化されたカメラ構成オプションなど、AIがサポートする重要なマシンビジョン機能にすぐにアクセスできます。 ArmNNおよびTensorFlowLiteエコシステムに基づいてカスタマイズされた推論アルゴリズムへのアクセス。

セットの中心となるのは、SMARC 2.1 Computer-on-Module conga-SMX8-Plusで、4つのArm Cortex-A53コア、1x Arm Cortex-M72コントローラー、およびディープラーニングアルゴリズムを高速化するNXP NPUを備え、パッシブ冷却が付属しています。

3.5インチキャリアボードconga-SMC1 / SMARC-ARMは、追加のコンバータモジュールなしで、MIPICSI-13を介してMIPIカメラ用の4200MP Basler dart daA30-1.8mciBCONをF4f2.0mmレンズに直接接続します。 MIPI CSI-2.0の次に、USBおよびGigEビジョンカメラもサポートされています。

ソフトウェア側では、congatecは、事前構成されたブートローダー、Yocto OSイメージ、マッチングBSP、およびキャプチャされたイメージとビデオシーケンスに基づいて即時のAI推論トレーニングを可能にするプロセッサ最適化Basler組み込みビジョンソフトウェアを備えたブータブルSDカードを提供しました。