Os sensores da Prophesee afirmam melhorar o desempenho da câmera, particularmente em cenas dinâmicas de movimento rápido (por exemplo, cenas de esportes) e com pouca luz por meio de sua abordagem de detecção de pixel contínua e assíncrona baseada em eventos.
O Prophesee afirma que seus sensores permitem que as máquinas vejam eventos hiper-rápidos e fugazes em uma escala de tempo abaixo de um milissegundo, com apenas a essência da cena sendo gravada, usando de 10 a 1000 vezes menos dados processados em comparação com as abordagens padrão.
Cada pixel informa apenas quando detecta movimento. Considerando que em um quadro baseado sensor todos os pixels gravam ao mesmo tempo, em um sensor baseado em eventos cada pixel é perfeitamente independente.
Os sensores têm uma resolução de 1280x720px com um 'Time Resolution Equivalent' de 10k fps, uma faixa dinâmica de 120dB e um corte de luz baixa em 0.08 Lux.
Vídeo 1 – Cena esportiva: resultados preliminares de desfoque em cena de alta velocidade, obtidos combinando o sensor Prophesee Metavision e algoritmos com a plataforma Snapdragon.
Os sensores do Prophesee se concentram apenas nas mudanças em uma cena, pixel por pixel, continuamente em velocidades extremas.
Cada pixel no sensor Metavision incorpora um núcleo lógico, permitindo que ele atue como um neurônio.
Cada um deles se ativa de forma inteligente e assíncrona, dependendo da quantidade de fótons que detectam.
Um pixel que se ativa é chamado de evento. Em essência, os eventos são conduzidos pela dinâmica da cena, não mais por um relógio arbitrário, então a velocidade de aquisição sempre corresponde à dinâmica real da cena.
A desfocagem baseada em evento de alto desempenho é obtida sincronizando um sensor baseado em quadro e baseado em evento do Prophesee.
O sistema então preenche as lacunas entre e dentro dos quadros com eventos de microssegundos para extrair algoritmicamente informações de movimento puro e reparar o desfoque de movimento.
Os sensores são fabricados pela Sony com a qual a Prophesee tem uma colaboração de desenvolvimento de produto.
Em setembro passado, o Prophesee concluiu uma rodada da Série C de € 50 milhões com a adição de um novo investimento dos empreendimentos Prosperity7. Os investidores iniciais da Série C foram Sinovation Ventures e Xiaomi, juntando-se aos investidores anteriores Intel Capital, Robert Bosch Venture Capital, 360 Capital, iBionext e o Banco Europeu de Investimento. A Prophesee arrecadou US$ 127 milhões desde sua fundação em 2014.