Партнерство обеспечивает создание эталонных проектов трехмерного зондирования на основе искусственного интеллекта для устройств AIoT.

Обновление: 29 мая 2021 г.

Заявляя о первых в отрасли подходах к биометрическому контролю доступа, трехмерным электронным замкам и интеллектуальному зондированию на вертикальных рынках, Ambarella, Inc., Lumentum и ON Полупроводниковое разработали два совместных эталонных проекта трехмерного зондирования на основе искусственного интеллекта, которые предназначены для ускорения развертывания устройств AIoT. Эти эталонные проекты - Saturn для электронных замков и Vision + для биометрических считывателей контроля доступа - основаны на предыдущем совместном решении компаний для систем бесконтактного доступа.

В эталонных проектах используются высокопроизводительные матричные осветители VCSEL от Lumentum и система ON. Полупроводниковое изображение датчик с использованием AI SoC от Ambarella. Результат - более высокий уровень точности и более интеллектуальный процесс принятия решений для биометрического контроля доступа, трехмерных электронных замков и других приложений интеллектуального зондирования. Кроме того, по словам Амбареллы, высокий уровень интеграции значительно снижает энергопотребление системы и требования к тепловому дизайну, а также позволяет создавать продукты с гораздо меньшими форм-факторами.

В дополнение к приложениям для целевого биометрического контроля доступа и электронных замков эти новые эталонные конструкции могут использоваться в приложениях, используемых в умных городах, умных зданиях, умных домах и умном здравоохранении.

Изображение: Ambarella

По словам Уильяма Сюя, директора по маркетингу Ambarella, новый эталонный дизайн является естественным продолжением предыдущего сотрудничества. «Наш первый совместный эталонный дизайн под названием Janus был представлен в 2020 году. Это было первое в отрасли решение с однокамерным структурированным светом для биометрических считывателей контроля доступа, а также приложений учета рабочего времени и мобильных платежей».

Сюй сказал, что последующее сотрудничество с OEM-производителями привело к разработке его первого совместного эталонного дизайна Saturn, предназначенного для гостиничных замков и жилых помещений.

Компании утверждают, что эталонный дизайн Saturn является первым в отрасли AIoT, в котором интегрирована обработка искусственного интеллекта как для измерения структурированного света одной камерой, так и для обработки видео с быстрой загрузкой. Основанный на искусственном процессоре машинного зрения Ambarella CV25 CVflow, он включает в себя камеру со структурированным светом, работающую на базе технологии VCSEL от Lumentum. technology и датчик изображения RGB-IR AR0237CS 2 МП от ON Semiconductor.

«В то же время стало очевидно, что OEM-производителям нужен полный портфель продуктов для приложений / развертываний, требующих более высокого разрешения, в том числе для защиты от спуфинга и большей дальности», - сказал он. «Три компании снова работали вместе над нашим вторым новым совместным эталонным дизайном под названием Vision +. Для этого эталонного дизайна компания ON Semiconductor создала новый датчик изображения 4K RGB-IR, Lumentum обновила свое решение освещения VCSEL для поддержки более длинных расстояний для 3D-зондирования, и мы использовали SoC Ambarella CV22 AI Vision для поддержки сигналов изображения и обработки AI в этом эталонном дизайне. требования."

Эталонный дизайн Vision + нацелен на биометрические считыватели контроля доступа. Заявленное как первое в индустрии AIoT решение 4K, обеспечивающее однокамерное распознавание структурированного света 940 нм на основе технологии RGB-IR, оно также считается первым, использующим однокристальное решение для обработки глубины, обработки AI, и обработка видео. Основанный на процессоре машинного зрения Ambarella CV22 CVflow AI, он включает однокамерный датчик структурированного света на основе технологии Lumentum VCSEL с дальностью действия два метра и датчик изображения 4K (8MP) RGB-IR CMOS от ON Semiconductor.

В дополнение к двум эталонным проектам доступны комплекты разработки для 3D-зондирования, отвечающие различным требованиям, предъявляемым к конкретным приложениям. Для приложений интеллектуального зондирования комплекты для разработки на базе процессора машинного зрения CVflow AI от Ambarella серии CV2 могут поставляться с адаптерами датчиков ToF, которые питаются от массивов Lumentum VCSEL. Также доступен дополнительный адаптер для датчика изображения 4K RGB-IR.

Сюй сказал, что сочетание совместных эталонных проектов и комплектов для разработки теперь позволяет OEM-производителям создать полную дорожную карту приложений для интеллектуальных зданий. К ним относятся датчики раздвижных дверей, биометрические считыватели контроля доступа, устройства защиты от захвата для повышения безопасности и камеры контроля присутствия, которые предоставляют информацию о занятости в режиме реального времени для принятия решений.

Щелкните, чтобы увеличить изображение. (Изображение: Ambarella)

Кроме того, открытый комплект разработки программного обеспечения (SDK) для процессоров машинного зрения CVflow AI от Ambarella позволяет интегрировать сторонние приложения. Это также позволяет OEM-производителям удовлетворять различные региональные требования с помощью единой платформы (например, используя разные алгоритмы искусственного интеллекта в разных регионах).

SDK на базе Linux предлагает ряд функций, включая поддержку различных 3D-модальностей, таких как структурированный свет и ToF, встроенные процессоры Arm, интегрированный интернет-провайдер для обработки сложных сцен, включая высокий динамический диапазон и слабое освещение, а также высокий логический вывод ИИ. возможности камеры для одновременной работы нескольких нейронных сетей. Интегрированная безопасность включает безопасную загрузку, OTP для хранения ключей шифрования и технологию Arm TrustZone для безопасного сравнения ключей шифрования.

SDK также предлагает возможности разработки пользовательских приложений и инструменты искусственного интеллекта для поддержки разработки и миграции глубокой нейронной сети (DNN). Ожидается, что совместные эталонные образцы и комплекты для разработки будут доступны в Ambarella в июне.

об AmbarellaLumentumON Semiconductor