Termisk bildebehandling har som mål å gi autonome biler bedre nattsyn

Kategori: Ukategorisert Lagt ut 11. sep

Det er mange slående forskjeller mellom en gjerdestolpe og et menneske, men en kan vise seg å være spesielt nyttig for robotkjøretøy: temperatur.

Det er i hvert fall det etablerte termobildefirmaet FLIR og den israelske oppstarten Adasky synes at. Begge selskapene bygger nye termiske sensorer for bruk i autonome biler, og de tror at de ekstra dataene kan brukes til å oppdage farer under ugunstige forhold. Spesielt mennesker og dyr på eller i nærheten av veien skaper langt mer varme enn omgivelsene.

Noen avanserte bilprodusenter, inkludert Porsche, BMW og Audi, har utstyrt kjøretøyer med termiske sensorer fra FLIR i flere år. Kjøretøyene bruker dem til å varsle en sjåfør om tilstedeværelsen av dyr eller mennesker på veien om natten, som kanskje ikke dukker opp innenfor rekkevidde av bilens frontlykter. Disse sensorene tilbyr et bilde som er 320 piksler bredt og 240 piksler høyt.

Nå håper både FLIR og Adasky å oppnå et lignende resultat i autonome biler ved å bruke nye sensorer som de begge bygger.

Adasky kunngjorde i dag en ny fjerninfrarød sensor, kalt Viper, som tilbyr bedre oppløsning (640 piksler x 480) ved oppdateringshastigheter på 60 bilder per sekund og kan oppdage temperaturforskjeller så små som 0,05 °C. Adaskys Dror Meiri forteller MIT Technology Review at slik følsomhet gjør at enheten ikke bare oppdager noe som en elg på veien, men også lett kan se ting som svart is på overflaten av en motorvei. Han sier at enheten skal være i masseproduksjon innen 2020.

Videoen over viser Adaskys sensor i bruk på en landevei. Til venstre er et kamera med synlig lys, til høyre dets termiske sensor. Syklister, fotgjengere og dyr dukker absolutt opp langt skarpere til høyre. Og den skarpe kontrasten til omgivelsene vil gjøre det lettere for en bil å nærme seg disse livsfarene med forsiktighet på en måte som lidar, som bare gir informasjon om spennvidde, kanskje ikke.

FLIR utvikler også en VGA-enhet for bruk spesielt i selvkjørende biler. Paul Clayton, direktør for bilindustrien hos FLIR, sier at prøveenheter av sensorene blir sendt til noen produsenter for testing i år, og at masseproduserte sensorer kan koste «et par hundre dollar».

Hvis du lurer på hvorfor en annen sensor kan være nødvendig i en førerløs bil, peker begge selskapene på et viktig, om enn uinspirerende ord: redundans. 'Det er en utvidelse, en noe overflødig sensor som hjelper til med å klassifisere under dårlige lysforhold eller vær,' forklarer Clayton. Vi har tidligere forklart at flere sensorer kan tillate autonome biler å forstå omgivelsene sine bedre, og den skarpe kontrasten til termisk bildebehandling kan gi, for eksempel, et glimt av et menneske for å gi ekstra kontekst som bidrar til å avverge en farlig hendelse.

Likevel gir en ekstra sensor en annen datastrøm å behandle, og fordi termisk bildebehandling er mindre mye brukt på veiene enn kameraer med synlig lys og til og med lidar, må maskinlæringssystemene som skiller detaljer fra opptak ta igjen. Begge firmaene ser ut til å forstå det: Adasky har bygget sin egen AI for å behandle data for sine kunder, og FLIR setter sammen en termisk bildedatabase som klienter kan bruke til å trene sine egne nevrale nettverk.

Bruk av termisk bildebehandling i autonome kjøretøy vil sannsynligvis komme ned til budsjettet. Noen produsenter kan unngå på bekostning av enda en sensor, men inntil billige lidar-sensorer tilbyr kvaliteten som bilprodusenter kanskje liker, kan enhetene legge til et nyttig lag med sikkerhet.