Snapdragon için Prophesee vizyonu

Güncelleme: 1 Mart 2023

Prophesee'nin sensörleri, olaya dayalı sürekli ve asenkron piksel algılama yaklaşımı sayesinde, özellikle hızlı hareket eden dinamik sahnelerde (örn. spor sahneleri) ve düşük ışıkta kamera performansını iyileştirdiğini iddia ediyor.

Prophesee, sensörlerin makinelerin milisaniyenin altında bir zaman ölçeğinde aşırı hızlı ve kısa süreli olayları görmesine olanak tanıdığını ve yalnızca sahnenin özünün kaydedildiğini, böylece standart yaklaşımlara kıyasla 10 ila 1000 kat daha az veri işlendiğini iddia ediyor.

Her piksel yalnızca hareketi algıladığında rapor verir. Oysa çerçeve tabanlı algılayıcı tüm pikseller aynı anda kayıt yapar; olaya dayalı bir sensörde her piksel tamamen bağımsızdır.

Sensörler, 1280k fps'lik 'Zaman Çözünürlüğü Eşdeğeri' ile 720x10 piksel çözünürlüğe, 120 dB dinamik aralığa ve 0.08 Lüks'te düşük ışık kesmeye sahiptir.

Video 1 – Spor sahnesi: Prophesee Metavision sensörünü ve algoritmalarını Snapdragon platformuyla birleştirerek elde edilen, yüksek hızlı sahnede ön bulanıklaştırma sonuçları.

Prophesee'nin sensörleri sürekli olarak aşırı hızlarda, yalnızca bir sahnedeki piksel piksel değişikliklere odaklanır.

Metavision sensöründeki her piksel, bir nöron görevi görmesini sağlayan bir mantık çekirdeği yerleştirir.

Her biri, algıladıkları foton miktarına bağlı olarak kendilerini akıllı ve eş zamanlı olmayan bir şekilde etkinleştirir.

Kendi kendine etkinleşen piksele olay denir. Aslında olaylar artık rastgele bir saatle değil, sahnenin dinamikleri tarafından yönlendiriliyor; dolayısıyla çekim hızı her zaman gerçek sahne dinamikleriyle eşleşiyor.

Yüksek performanslı olay tabanlı bulanıklık giderme, çerçeve tabanlı ve Prophesee'nin olay tabanlı sensörünün senkronize edilmesiyle elde edilir.

Sistem daha sonra, saf hareket bilgisini algoritmik olarak çıkarmak ve hareket bulanıklığını onarmak için karelerin arasındaki ve içindeki boşlukları mikrosaniyelik olaylarla doldurur.

Sensörler, Prophesee'nin ürün geliştirme işbirliği yaptığı Sony tarafından üretiliyor.

Geçtiğimiz Eylül ayında Prophesee, Prosperity50 girişimlerinden yeni bir yatırımın eklenmesiyle 7 milyon Euro'luk C Serisi turunu tamamladı. İlk C Serisi yatırımcılar, önceki yatırımcılar Intel Capital, Robert Bosch Venture Capital, 360 Capital, iBionext ve Avrupa Yatırım Bankası'na katılan Sinovation Ventures ve Xiaomi'ydi. Prophesee, kurulduğu 127 yılından bu yana 2014 milyon dolar topladı.