Los sensores de Profhesee afirman mejorar el rendimiento de la cámara, particularmente en escenas dinámicas de movimiento rápido (por ejemplo, escenas deportivas) y con poca luz a través de su enfoque de detección de píxeles continuos y asincrónicos basados en eventos.
Prophesee afirma que sus sensores permiten que las máquinas vean eventos fugaces y ultrarrápidos en una escala de tiempo de submilisegundos y solo se graba la esencia de la escena, por lo que se procesan de 10 a 1000 veces menos datos en comparación con los enfoques estándar.
Cada píxel solo informa cuando detecta movimiento. Mientras que en un marco basado sensor todos los píxeles graban al mismo tiempo, en un sensor basado en eventos cada píxel es perfectamente independiente.
Los sensores tienen una resolución de 1280x720px con un 'Equivalente de resolución de tiempo' de 10k fps, un rango dinámico de 120dB y un corte de luz bajo a 0.08 Lux.
Video 1 – Escena deportiva: Resultados preliminares de desenfoque en escena de alta velocidad, obtenidos combinando el sensor y los algoritmos de Prophesee Metavision con la plataforma Snapdragon.
Los sensores de Profhesee se enfocan solo en los cambios en una escena, píxel por píxel, continuamente a velocidades extremas.
Cada píxel del sensor Metavision incorpora un núcleo lógico, lo que le permite actuar como una neurona.
Cada uno de ellos se activa de manera inteligente y asincrónica según la cantidad de fotones que detectan.
Un píxel que se activa a sí mismo se llama evento. En esencia, los eventos son impulsados por la dinámica de la escena, ya no por un reloj arbitrario, por lo que la velocidad de adquisición siempre coincide con la dinámica real de la escena.
El desenfoque basado en eventos de alto rendimiento se logra mediante la sincronización de un sensor basado en fotogramas y un sensor basado en eventos de Prophesee.
Luego, el sistema llena los espacios entre y dentro de los cuadros con eventos de microsegundos para extraer algorítmicamente información de movimiento puro y reparar el desenfoque de movimiento.
Los sensores son fabricados por Sony, con quien Prophesee tiene una colaboración de desarrollo de productos.
El pasado mes de septiembre, Prophesee completó una ronda Serie C de 50 millones de euros con la incorporación de una nueva inversión de Prosperity7 Ventures. Los inversores iniciales de la Serie C fueron Sinovation Ventures y Xiaomi, uniéndose a los inversores anteriores Intel Capital, Robert Bosch Venture Capital, 360 Capital, iBionext y el Banco Europeo de Inversiones. Prophesee ha recaudado $127 millones desde su fundación en 2014.