Kemitraan menghasilkan desain referensi penginderaan 3D berbasis AI untuk perangkat AIoT

Pembaruan: 29 Mei 2021

Mengklaim pendekatan industri pertama untuk kontrol akses biometrik, kunci elektronik 3D, dan penginderaan cerdas di seluruh pasar vertikal, Ambarella, Inc., Lumentum, dan ON Semikonduktor telah mengembangkan dua desain referensi penginderaan 3D berbasis AI yang dirancang untuk mempercepat penerapan perangkat AIoT. Desain referensi ini - Saturnus untuk kunci elektronik dan Vision + untuk pembaca kontrol akses biometrik - dibangun di atas solusi bersama perusahaan sebelumnya untuk sistem akses tanpa kontak.

Desain referensi ini memanfaatkan iluminator rangkaian VCSEL berkinerja tinggi dan ON dari Lumentum Semikonduktor gambar Sensor menggunakan AI SoC Ambarella. Hasilnya adalah tingkat akurasi yang lebih tinggi dan pengambilan keputusan yang lebih cerdas untuk kontrol akses biometrik, kunci elektronik 3D, dan aplikasi penginderaan cerdas lainnya. Selain itu, tingkat integrasi yang tinggi secara signifikan menurunkan konsumsi daya sistem dan persyaratan desain termal serta memungkinkan faktor bentuk produk yang jauh lebih kecil, kata Ambarella.

Selain kontrol akses biometrik dan aplikasi kunci elektronik yang ditargetkan, desain referensi baru ini dapat digunakan dalam aplikasi yang ditemukan di kota pintar, gedung pintar, rumah pintar, dan perawatan kesehatan cerdas.

Gambar: Ambarella

Desain referensi baru merupakan perkembangan alami dari kolaborasi sebelumnya, kata William Xu, direktur pemasaran, Ambarella. "Desain referensi bersama pertama kami, yang disebut Janus, diperkenalkan pada tahun 2020. Ini adalah solusi lampu terstruktur kamera tunggal pertama di industri untuk pembaca kontrol akses biometrik, serta aplikasi waktu kehadiran dan pembayaran seluler."

Xu mengatakan keterlibatan selanjutnya dengan OEM mengarah pada pengembangan desain referensi bersama baru yang pertama, Saturn, yang ditujukan untuk kunci perhotelan dan aplikasi perumahan.

Perusahaan-perusahaan tersebut mengklaim bahwa desain referensi Saturnus adalah yang pertama di industri AIoT yang mengintegrasikan pemrosesan AI untuk penginderaan cahaya terstruktur kamera tunggal dan pemrosesan video boot cepat. Berdasarkan prosesor visi Ambarella CV25 CVflow AI, kamera ini mencakup kamera cahaya terstruktur yang ditenagai oleh VCSEL Lumentum teknologi dan sensor gambar AR0237CS 2 MP RGB-IR dari ON Semiconductor.

“Pada saat yang sama, menjadi jelas bahwa OEM membutuhkan portofolio produk yang lengkap, untuk aplikasi / penerapan yang membutuhkan resolusi lebih tinggi, termasuk untuk anti-spoofing dan jangkauan yang lebih jauh,” katanya. “Ketiga perusahaan kembali berkolaborasi bersama untuk desain referensi bersama baru kami yang kedua, yang disebut Vision +. Untuk desain referensi ini, ON Semiconductor membangun sensor gambar 4K RGB-IR baru, Lumentum meningkatkan solusi pencahayaan VCSEL-nya untuk mendukung jarak yang lebih jauh untuk penginderaan 3D, dan kami menggunakan Ambarella's CV22 AI vision SoC untuk mendukung pemrosesan sinyal gambar dan AI desain referensi ini. Persyaratan."

Desain referensi Vision + menargetkan pembaca kontrol akses biometrik. Diklaim sebagai solusi 4K pertama di industri AIoT yang melakukan penginderaan cahaya terstruktur dengan kamera tunggal, 940-nm berdasarkan teknologi RGB-IR, juga dikatakan sebagai yang pertama memanfaatkan solusi chip tunggal untuk pemrosesan mendalam, pemrosesan AI, dan pemrosesan video. Berdasarkan prosesor visi Ambarella CV22 CVflow AI, ini mencakup penginderaan cahaya terstruktur kamera tunggal yang didukung oleh teknologi VCSEL Lumentum, menampilkan jangkauan dua meter, dan sensor gambar CMOS RGB-IR 4K (8MP) dari ON Semiconductor.

Selain dua desain referensi, kit pengembangan penginderaan 3D tersedia, yang menangani persyaratan khusus aplikasi yang berbeda. Untuk aplikasi penginderaan cerdas, kit pengembangan berbasis prosesor visi CV2 seri CV4 Ambarella dapat dilengkapi dengan adaptor sensor ToF yang didukung oleh array VCSEL Lumentum. Adaptor sensor gambar XNUMXK RGB-IR opsional juga tersedia.

Xu mengatakan kombinasi desain referensi bersama dan kit pengembangan sekarang memungkinkan OEM untuk membangun peta jalan produk yang lengkap dari aplikasi bangunan pintar. Ini termasuk sensor pintu geser, pembaca kontrol akses biometrik, perangkat anti-tailgating untuk meningkatkan keamanan, dan kamera penginderaan hunian yang memberikan kecerdasan hunian waktu nyata untuk pengambilan keputusan.

Klik untuk gambar yang lebih besar. (Gambar: Ambarella)

Selain itu, kit pengembangan perangkat lunak terbuka (SDK) untuk prosesor visi CVflow AI Ambarella memungkinkan integrasi aplikasi pihak ketiga. Ini juga memungkinkan OEM untuk menangani persyaratan regional yang berbeda dengan satu platform (misalnya, menggunakan algoritma AI yang berbeda di wilayah yang berbeda).

SDK berbasis Linux menawarkan berbagai fitur, termasuk dukungan untuk berbagai modalitas 3D seperti cahaya terstruktur dan ToF, prosesor Arm bawaan, ISP terintegrasi untuk menangani pemandangan yang menantang, termasuk rentang dinamis tinggi dan cahaya rendah, dan inferensi AI yang tinggi kemampuan pada perangkat kamera untuk mengaktifkan beberapa jaringan saraf yang berjalan secara bersamaan. Keamanan terintegrasi mencakup boot aman, OTP untuk menyimpan kunci enkripsi, dan teknologi Arm TrustZone untuk perbandingan kunci enkripsi yang aman.

SDK juga menawarkan kemampuan pengembangan aplikasi khusus dan alat AI untuk mendukung pengembangan dan migrasi jaringan saraf dalam (DNN). Desain referensi bersama dan kit pengembangan diharapkan tersedia pada bulan Juni dari Ambarella.

tentang Semikonduktor AmbarellaLumentumON