I sensori di Prophesee affermano di migliorare le prestazioni della fotocamera, in particolare nelle scene dinamiche in rapido movimento (ad esempio scene sportive) e in condizioni di scarsa illuminazione attraverso il suo approccio di rilevamento dei pixel continuo e asincrono basato sugli eventi.
Prophesee afferma che i sensori consentono alle macchine di vedere eventi iperveloci e fugaci su una scala temporale inferiore al millisecondo, registrando solo l'essenza della scena, quindi utilizzando da 10 a 1000 volte meno dati elaborati rispetto agli approcci standard.
Ogni pixel segnala solo quando rileva il movimento. Mentre in un frame-based sensore tutti i pixel registrano contemporaneamente, in un sensore basato sugli eventi ogni pixel è perfettamente indipendente.
I sensori hanno una risoluzione di 1280x720px con una "risoluzione temporale equivalente" di 10k fps, una gamma dinamica di 120dB e un'interruzione della luce scarsa a 0.08 Lux.
Video 1 – Scena sportiva: risultati preliminari di deblurring su scena ad alta velocità, ottenuti combinando il sensore e gli algoritmi Prophesee Metavision con la piattaforma Snapdragon.
I sensori di Prophesee si concentrano solo sui cambiamenti in una scena, pixel per pixel, continuamente a velocità estreme.
Ogni pixel nel sensore Metavision incorpora un nucleo logico, che gli consente di agire come un neurone.
Ognuno di loro si attiva in modo intelligente e asincrono a seconda della quantità di fotoni che percepisce.
Un pixel che si attiva da solo è chiamato evento. In sostanza, gli eventi sono guidati dalle dinamiche della scena, non più da un orologio arbitrario, quindi la velocità di acquisizione corrisponde sempre alle effettive dinamiche della scena.
Il deblurring basato su eventi ad alte prestazioni si ottiene sincronizzando un sensore basato su frame e basato su eventi di Prophesee.
Il sistema quindi riempie gli spazi tra e all'interno dei fotogrammi con eventi di microsecondi per estrarre algoritmicamente informazioni di movimento pure e riparare il motion blur.
I sensori sono fabbricati da Sony con cui Prophesee ha una collaborazione per lo sviluppo del prodotto.
Lo scorso settembre, Prophesee ha completato un round di serie C di 50 milioni di euro con l'aggiunta di un nuovo investimento da Prosperity7 ventures. Gli investitori iniziali della serie C erano Sinovation Ventures e Xiaomi, unendosi ai precedenti investitori Intel Capital, Robert Bosch Venture Capital, 360 Capital, iBionext e la Banca europea per gli investimenti. Prophesee ha raccolto 127 milioni di dollari dalla sua fondazione nel 2014.