A parceria produz designs de referência de detecção 3D baseados em IA para dispositivos AIoT

Atualização: 29 de maio de 2021

Reivindicando as primeiras abordagens do setor para controle de acesso biométrico, travas eletrônicas 3D e detecção inteligente em mercados verticais, Ambarella, Inc., Lumentum e ON Semicondutores desenvolveram dois projetos conjuntos de referência de detecção 3D baseados em AI que são projetados para acelerar a implantação de dispositivos AIoT. Esses designs de referência - Saturn para fechaduras eletrônicas e Vision + para leitores de controle de acesso biométrico - são desenvolvidos com base na solução conjunta anterior das empresas para sistemas de acesso sem contato.

Os designs de referência aproveitam os iluminadores de matriz VCSEL de alto desempenho da Lumentum e um ON Semicondutores imagem sensor usando AI SoC de Ambarella. O resultado são níveis mais altos de precisão e tomada de decisão mais inteligente para controle de acesso biométrico, fechaduras eletrônicas 3D e outras aplicações de detecção inteligente. Além disso, o alto nível de integração reduz significativamente o consumo de energia do sistema e os requisitos de design térmico, além de permitir fatores de forma de produto muito menores, disse Ambarella.

Além do controle de acesso biométrico direcionado e aplicativos de bloqueio eletrônico, esses novos projetos de referência podem ser usados ​​em aplicativos encontrados em cidades inteligentes, edifícios inteligentes, casas inteligentes e saúde inteligente.

Imagem: Ambarella

Os novos designs de referência são uma progressão natural da colaboração anterior, disse William Xu, diretor de marketing da Ambarella. “Nosso primeiro projeto de referência conjunta, chamado Janus, foi apresentado em 2020. Foi a primeira solução de luz estruturada de câmera única do setor para leitores de controle de acesso biométrico, bem como aplicativos de ponto de atendimento e pagamento móvel.”

Xu disse que os compromissos subsequentes com OEMs levaram ao desenvolvimento de seu primeiro novo projeto de referência conjunta, o Saturn, que é para fechaduras de hospitalidade e aplicações residenciais.

As empresas afirmam que o design de referência do Saturn é o primeiro da indústria AIoT a integrar processamento de IA para detecção de luz estruturada de câmera única e processamento de vídeo de inicialização rápida. Baseado no processador de visão Ambarella CV25 CVflow AI, inclui uma câmera de luz estruturada alimentada pelo VCSEL da Lumentum tecnologia e o sensor de imagem AR0237CS 2 MP RGB-IR da ON Semiconductor.

“Ao mesmo tempo, ficou claro que os OEMs precisavam de um portfólio completo de produtos, para aplicativos / implantações que exigem resolução mais alta, incluindo anti-spoofing e maior alcance”, disse ele. “As três empresas colaboraram novamente em nosso segundo novo projeto de referência conjunta, denominado Vision +. Para este projeto de referência, a ON Semiconductor construiu um novo sensor de imagem 4K RGB-IR, a Lumentum atualizou sua solução de iluminação VCSEL para suportar distâncias mais longas para detecção 3D e usamos o CV22 AI Vision SoC da Ambarella para dar suporte ao sinal de imagem e processamento de AI deste projeto de referência requisitos. ”

O design de referência Vision + visa leitores de controle de acesso biométrico. Considerada a primeira solução 4K da indústria de AIoT a realizar detecção de luz estruturada de 940 nm com câmera única com base na tecnologia RGB-IR, também é considerada a primeira a alavancar uma solução de chip único para processamento de profundidade, processamento de AI, e processamento de vídeo. Com base no processador de visão Ambarella CV22 CVflow AI, ele inclui detecção de luz estruturada de câmera única alimentada pela tecnologia VCSEL da Lumentum, com alcance de dois metros e um sensor de imagem CMOS RGB-IR de 4K (8MP) da ON Semiconductor.

Além dos dois projetos de referência, kits de desenvolvimento de detecção 3D estão disponíveis, atendendo a diferentes requisitos específicos de aplicação. Para aplicações de detecção inteligente, os kits de desenvolvimento baseados em processador de visão CVflow AI série CV2 da Ambarella podem ser fornecidos com adaptadores de sensor ToF que são alimentados por matrizes VCSEL da Lumentum. Um adaptador de sensor de imagem 4K RGB-IR opcional também está disponível.

Xu disse que a combinação dos projetos de referência conjuntos e kits de desenvolvimento agora permite que os OEMs construam um roteiro de produto completo de aplicações de edifícios inteligentes. Isso inclui sensores de porta deslizante, leitores de controle de acesso biométrico, dispositivos anti-tailgating para segurança aprimorada e câmeras de detecção de ocupação que fornecem inteligência de ocupação em tempo real para a tomada de decisões.

Clique para ampliar a imagem. (Imagem: Ambarella)

Além disso, o kit de desenvolvimento de software aberto (SDK) para os processadores de visão CVflow AI da Ambarella permite a integração de aplicativos de terceiros. Ele também permite que os OEMs atendam aos diferentes requisitos regionais com uma única plataforma (por exemplo, usando diferentes algoritmos de IA em diferentes regiões).

O SDK baseado em Linux oferece uma gama de recursos, incluindo suporte para diferentes modalidades 3D, como luz estruturada e ToF, processadores Arm embutidos, um ISP integrado para lidar com cenas desafiadoras, incluindo alta faixa dinâmica e pouca luz e alta inferência de IA recursos no dispositivo da câmera para permitir que várias redes neurais sejam executadas simultaneamente. A segurança integrada inclui inicialização segura, OTP para armazenar chaves de criptografia e tecnologia Arm TrustZone para comparações de chaves de criptografia seguras.

O SDK também oferece recursos de desenvolvimento de aplicativos personalizados e ferramentas de IA para dar suporte ao desenvolvimento e migração de redes neurais profundas (DNN). Os projetos conjuntos de referência e kits de desenvolvimento devem estar disponíveis em junho na Ambarella.

sobre AmbarellaLumentumON Semiconductor