Termisk bildbehandling syftar till att ge autonoma bilar bättre mörkerseende

Kategori: Okategoriserad Postad 11 sep

Det finns många slående skillnader mellan en stängselstolpe och en människa, men en kan visa sig vara särskilt användbar för robotfordon: temperatur.

Det är åtminstone vad det etablerade värmebildsföretaget FLIR och den israeliska startupen Adasky tror. Båda företagen bygger nya termiska sensorer för användning i autonoma bilar, och de tror att extra data kan användas för att upptäcka faror under ogynnsamma förhållanden. I synnerhet människor och djur på eller nära vägen skapar mycket mer värme än omgivningen.

Vissa avancerade biltillverkare, inklusive Porsche, BMW och Audi, har utrustat fordon med värmesensorer från FLIR i flera år. Fordonen använder dem för att uppmärksamma en förare på närvaron av djur eller människor på vägen på natten, som kanske inte dyker upp inom räckhåll för bilens strålkastare. Dessa sensorer ger en bild 320 pixlar bred och 240 hög.

Nu hoppas både FLIR och Adasky kunna uppnå ett liknande resultat i autonoma bilar med nya sensorer som de båda bygger.

Adasky tillkännagav idag en ny fjärrinfraröd sensor, kallad Viper, som erbjuder bättre upplösning (640 pixlar gånger 480) vid uppdateringshastigheter på 60 bilder per sekund och kan upptäcka temperaturskillnader så små som 0,05 °C. Adaskys Dror Meiri berättar MIT Technology Review att sådan känslighet gör att enheten inte bara kan upptäcka något som en älg på vägen, utan också att lätt urskilja saker som svart is på ytan av en motorväg. Han säger att enheten ska vara i massproduktion 2020.

Videon ovan visar Adaskys sensor som används på en landsväg. Till vänster finns en kamera för synligt ljus, till höger dess värmesensor. Cyklister, fotgängare och djur dyker säkert upp mycket skarpare till höger. Och den skarpa kontrasten till omgivningen skulle göra det lättare för en bil att närma sig dessa livsfaror med försiktighet på ett sätt som lidar, som bara ger information om avstånd, kanske inte.

FLIR utvecklar också en VGA-enhet för användning specifikt i självkörande bilar. Paul Clayton, chef för fordonsindustrin på FLIR, säger att provenheter av sensorerna skickas till vissa tillverkare för test i år och att masstillverkade sensorer kan kosta 'ett par hundra dollar.'

Om du undrar varför ytterligare en sensor kan behövas i en förarlös bil, pekar båda företagen på ett viktigt, om än oinspirerande ord: redundans. 'Det är en förstärkning, en något redundant sensor som hjälper till att klassificera i dåliga ljusförhållanden eller väder', förklarar Clayton. Vi har tidigare förklarat att flera sensorer kan tillåta autonoma bilar att få en bättre känsla för sin omgivning, och den skarpa kontrasten i värmeavbildning kan göra det möjligt att till exempel få en glimt av en människa för att ge extra sammanhang som hjälper till att förhindra en farlig incident.

Trots det ger en extra sensor en annan dataström att bearbeta, och eftersom värmebilder används i mindre utsträckning på vägarna än kameror med synligt ljus och till och med lidar, måste maskininlärningssystemen som urskiljer detaljer från filmer komma ikapp. Båda företagen verkar förstå det: Adasky har byggt sin egen AI för att bearbeta data åt sina kunder, och FLIR håller på att sammanställa en termisk bilddatabas som kunder kan använda för att träna sina egna neurala nätverk.

Antagandet av värmebilder i autonoma fordon kommer sannolikt att komma ner till budgeten. Vissa tillverkare kan avstå på bekostnad av ytterligare en sensor, men tills billiga lidar-sensorer erbjuder den kvalitet som biltillverkare kanske gillar, kan enheterna lägga till ett användbart lager av säkerhet.