Skriv ut

 Sony annonserar två nya händelsebaserade bildsensorer. De har en bildpunktsstorlek på 4,86 µm. Provexemplar ska släppas i oktober.

Sensorerna är utvecklade tillsammans med Prophesee, som är en av de ledande tillverkarna av händelsekameror. 

Händelsekameran är en spännande typ av sensor som kanske kan komma att helt rita om kartan inom datorseende och AI. Till skillnad från en vanlig kamera registrerar den bara förändring i bild vilket skruvar upp vissa prestanda med flera magnituder. 

De nya modellerna heter IMX636 och IMX637. De har en upplösning på 1280 x 720 respektive 640 x 512 punkter. 

Alla dessa bildpunkter har sin egen intelligens, som tar plats. Därför är de nya kretsarna byggda på två stackade chips där det ena tar emot ljus och den andra hanterar beräkningarna. Uppdelningen i två chips har inneburit att Sony och Prophesee kunnat krympa bildpunkten från 15 till 4,86 mikrometer.

Kapseln mäter 11 x 11 millimeter.  Kretsarna rapporterar upp till en dryg miljard ljusstyrkeförändringar per sekund. 

En ny funktion är tidsbaserade programmerbara filter som kan användas för att ignorera regelbundna ointressanta lokala händelser i bild, för att krympa dataströmmen ytterligare. Filtren kan även decimera datavolymen i blindo för att sänka beräkningskraven.

Prophesee släpper ett kompletterande mjukvarubibliotek kallat Metavision Intelligence Suite där du kan spela med alla dessa parametrar och analysera utdata.

Tillämpningsområdet är industriellt. I fabriker finns exempelvis maskiner som vibrerar och produkter som strömmar förbi i högt tempo. Händelsekameror kan mäta vibrationen visuellt och räkna produkterna. Händelsekameror kan även komma att ge drönare en betydligt snabbare reaktionstid.

En spännande användare är svenska Terranet som utvecklar ett fordonssensorsystem för förarassistans som ska kunna korta bilens reaktionstid jämfört med system baserade på lidar, radar eller kamera.

FAKTA Händelsekameror har digitala gränssnitt ur vilka det asynkront strömmar tidsstämplade rapporter om koordinater där det nyligen skett förändringar i ljusstyrka och hur stora dessa förändringen var.

Rapporterna skickas bara när det hänt nåt. I de flesta bildpunkter har det oftast inte hänt nåt. Det är därför denna bildsensor är snål och snabb. 

En bildpunkt har ofta ungefär samma ljusstyrka som punkten intill. Därmed behöver det inte släppas en rapport om varje bildpunkt bara för att motivet förflyttas. Tröskelvärdet för vad som räknas som förändring går att bestämma.

En vanlig kamera skulle behöva en bildfrekvens på nära en miljon hertz för att fånga lika snabba händelseförlopp.