Visi bernubuat untuk Snapdragon

Pembaruan: 1 Maret 2023

Sensor Prophesee mengklaim dapat meningkatkan kinerja kamera, terutama dalam adegan dinamis yang bergerak cepat (misalnya adegan olahraga) dan dalam cahaya redup melalui pendekatan penginderaan piksel kontinyu dan asinkron berbasis peristiwa.

Prophesee mengklaim bahwa sensornya memungkinkan mesin untuk melihat peristiwa yang sangat cepat dan singkat pada skala waktu sub-milidetik dengan hanya inti dari pemandangan yang direkam sehingga menggunakan 10 hingga 1000 kali lebih sedikit data yang diproses dibandingkan dengan pendekatan standar.

Setiap piksel hanya melaporkan saat merasakan gerakan. Sedangkan dalam bingkai berbasis Sensor semua piksel merekam pada saat yang sama, dalam sensor berbasis peristiwa, setiap piksel benar-benar independen.

Sensor memiliki resolusi 1280x720px dengan 'Time Resolution Equivalent' 10k fps, rentang dinamis 120dB dan cahaya redup terputus pada 0.08 Lux.

Video 1 – Adegan olahraga: Hasil deblurring awal pada adegan berkecepatan tinggi, diperoleh dengan menggabungkan sensor Prophesee Metavision dan algoritme dengan platform Snapdragon.

Sensor Prophesee hanya berfokus pada perubahan pemandangan, piksel demi piksel, secara terus-menerus dengan kecepatan ekstrem.

Setiap piksel dalam sensor Metavision menyematkan inti logika, memungkinkannya bertindak sebagai neuron.

Mereka masing-masing mengaktifkan diri secara cerdas dan asinkron tergantung pada jumlah foton yang mereka rasakan.

Piksel yang mengaktifkan dirinya sendiri disebut peristiwa. Intinya, peristiwa didorong oleh dinamika adegan, bukan lagi jam yang berubah-ubah, sehingga kecepatan akuisisi selalu sesuai dengan dinamika adegan yang sebenarnya.

Deblurring berbasis peristiwa berperforma tinggi dicapai dengan menyinkronkan sensor berbasis peristiwa berbasis bingkai dan Prophesee.

Sistem kemudian mengisi celah di antara dan di dalam bingkai dengan peristiwa mikrodetik untuk secara algoritme mengekstrak informasi gerakan murni dan memperbaiki buram gerakan.

Sensor dibuat oleh Sony yang memiliki kolaborasi pengembangan produk dengan Prophesee.

September lalu, Prophesee menyelesaikan putaran Seri C senilai €50 juta dengan penambahan investasi baru dari usaha Prosperity7. Investor Seri C awal adalah Sinovation Ventures dan Xiaomi, bergabung dengan investor sebelumnya Intel Capital, Robert Bosch Venture Capital, 360 Capital, iBionext dan Bank Investasi Eropa. Prophesee telah mengumpulkan $127 juta sejak didirikan pada tahun 2014.