Датчики Prophesee утверждают, что улучшают производительность камеры, особенно в динамичных динамичных сценах (например, спортивных сценах) и при слабом освещении благодаря подходу непрерывного и асинхронного распознавания пикселей на основе событий.
Prophesee утверждает, что его датчики позволяют машинам видеть сверхбыстрые и мимолетные события в масштабе менее миллисекунды, при этом записывается только суть сцены, поэтому обрабатывается от 10 до 1000 раз меньше данных по сравнению со стандартными подходами.
Каждый пиксель сообщает только тогда, когда он чувствует движение. В то время как в каркасном датчик все пиксели записывают одновременно, в событийном датчике каждый пиксель совершенно независим.
Датчики имеют разрешение 1280x720 пикселей с «эквивалентом временного разрешения» 10 120 кадров в секунду, динамический диапазон 0.08 дБ и отсечку при слабом освещении на уровне XNUMX люкс.
Видео 1 — Спортивная сцена: Предварительные результаты устранения размытия на высокоскоростной сцене, полученные с помощью датчика и алгоритмов Prophesee Metavision с платформой Snapdragon.
Сенсоры Prophesee фокусируются только на изменениях сцены, пиксель за пикселем, постоянно на экстремальных скоростях.
Каждый пиксель датчика Metavision содержит логическое ядро, что позволяет ему действовать как нейрон.
Каждый из них активирует себя разумно и асинхронно в зависимости от количества фотонов, которые они ощущают.
Активация пикселя называется событием. По сути, события управляются динамикой сцены, а не произвольными часами, поэтому скорость сбора данных всегда соответствует фактической динамике сцены.
Высокоэффективное удаление размытия на основе событий достигается за счет синхронизации кадрового и событийного датчиков Prophesee.
Затем система заполняет промежутки между кадрами и внутри них микросекундными событиями, чтобы алгоритмически извлекать чистую информацию о движении и устранять размытость движения.
Датчики изготовлены Sony, с которой Prophesee сотрудничает в разработке продуктов.
В сентябре прошлого года Prophesee завершила раунд серии C на сумму 50 миллионов евро с добавлением новых инвестиций от предприятий Prosperity7. Первыми инвесторами серии C были Sinovation Ventures и Xiaomi, присоединившиеся к предыдущим инвесторам Intel Capital, Robert Bosch Venture Capital, 360 Capital, iBionext и Европейский инвестиционный банк. С момента своего основания в 127 году компания Prophesee привлекла 2014 миллионов долларов.