Profeet visioen voor Leeuwenbek

Update: 1 maart 2023

De sensoren van Prophesee claimen de cameraprestaties te verbeteren, met name in snel bewegende dynamische scènes (bijv. Sportscènes) en bij weinig licht dankzij de op gebeurtenissen gebaseerde continue en asynchrone pixeldetectiebenadering.

Prophesee beweert dat machines dankzij de sensoren supersnelle en vluchtige gebeurtenissen op een tijdschaal van minder dan een milliseconde kunnen zien, waarbij alleen de essentie van de scène wordt vastgelegd, waardoor 10 tot 1000 keer minder gegevens worden verwerkt in vergelijking met standaardbenaderingen.

Elke pixel meldt alleen wanneer hij beweging waarneemt. Terwijl in een frame-gebaseerd sensor alle pixels nemen tegelijkertijd op, in een op gebeurtenissen gebaseerde sensor is elke pixel perfect onafhankelijk.

De sensoren hebben een resolutie van 1280x720px met een 'Time Resolution Equivalent' van 10k fps, een dynamisch bereik van 120dB en een low light cut off bij 0.08 Lux.

Video 1 – Sportscène: Voorlopige onscherpte-resultaten op snelle scène, verkregen door de Prophesee Metavision-sensor en algoritmen te combineren met het Snapdragon-platform.

De sensoren van Prophesee richten zich alleen op veranderingen in een scène, pixel voor pixel, continu met extreme snelheden.

Elke pixel in de Metavision-sensor bevat een logische kern, waardoor deze als een neuron kan fungeren.

Ze activeren zichzelf allemaal intelligent en asynchroon, afhankelijk van de hoeveelheid fotonen die ze waarnemen.

Een pixel die zichzelf activeert, wordt een gebeurtenis genoemd. In wezen worden gebeurtenissen aangestuurd door de dynamiek van de scène, niet meer door een willekeurige klok, dus de acquisitiesnelheid komt altijd overeen met de daadwerkelijke scènedynamiek.

Hoogwaardige onscherpte op basis van gebeurtenissen wordt bereikt door een op frames gebaseerde en op gebeurtenissen gebaseerde sensor van Prophesee te synchroniseren.

Het systeem vult vervolgens de gaten tussen en binnen de frames met gebeurtenissen van microseconden om op algoritmische wijze pure bewegingsinformatie te extraheren en bewegingsonscherpte te herstellen.

De sensoren zijn gefabriceerd door Sony waarmee Prophesee een productontwikkelingssamenwerking heeft.

Afgelopen september voltooide Prophesee een Series C-ronde van € 50 miljoen met de toevoeging van een nieuwe investering van Prosperity7-ondernemingen. De eerste Series C-investeerders waren Sinovation Ventures en Xiaomi en voegden zich bij eerdere investeerders Intel Capital, Robert Bosch Venture Capital, 360 Capital, iBionext en de Europese Investeringsbank. Prophesee heeft sinds de oprichting in 127 $ 2014 miljoen opgehaald.