211service.com
Kameran låter blinda människor navigera med gester
Eelke Folmer och Vinitha Khambadkar tror att blinda kunde klara sig utan sina vita käppar och istället navigera med en kamera runt halsen som ger talad vägledning som svar på handgester.
Folmer och Khambadkar, forskare vid University of Nevada, presenterade tekniken förra veckan vid ACM Symposium on User Interface Software and Technology. Känd som Gestural Interface for Remote Spatial Perception, som de förkortar som GIST , använder systemet en Microsoft Kinect-sensor för att analysera och identifiera objekt i dess synfält. GIST låter dig extrahera information från din miljö, säger Folmer.
Nevadaforskningen bygger på idéerna från MIT Sjätte sinnesprojektet , en förstärkt verklighetsansträngning där en bärbar enhet projicerar information till den fysiska världen och låter användaren interagera med den genom att vifta, peka eller göra andra handgester. Men däremot samlar GIST in data som svar på handgester som ett sätt att förstärka blinda människors kraftigt reducerade rumsuppfattning.
Till exempel, om någon som bär GIST gör ett V-tecken med pek- och långfingret, kommer enheten att identifiera den dominerande färgen i det inkapslade området. Om användaren håller fram en stängd näve kommer systemet att identifiera om en person är i den riktningen och hur långt borta han eller hon är. (Se forskarnas korta demonstrationsvideo nedan.)
Gester är dock inte avsedda att vara det enda sättet för interaktion med GIST, tack vare Kinects förmåga att känna igen objekt, ansikten och tal. Som Folmer förklarar: Du säger till sensorn något i stil med 'Det här är min kopp.' Du lägger ner den på bordet och säger: 'Hej, var är min kopp?' Det kommer att stå att den ligger precis framför dig. Nästa knep är att ta reda på hur man fortsätter spåra objektet när det rör sig längre bort eller bakom användaren.
Forskarna planerar också att se om GIST effektivt kan berätta för sina bärare vem är framför dem, genom att jämföra ansiktena på personer som den upptäcker med en liten databas som användaren kan ställa in med röstkommandon. Om det inte fungerar, säger Folmer, kan forskarna prova ett system som identifierar människor baserat på deras kroppsform.
GIST kommer snart att dra nytta av den nya Kinect 2.0-sensorn, som förbättrar originalets spårning och tillåter exakt fingerigenkänning – i motsats till bara händer. Förbehållet är dock att den nya Kinect är större och skrymmande, vilket gör den illa lämpad för långvarig användning runt halsen.
Men Folmer tror att det bara är en tidsfråga innan det finns Kinect-liknande sensorer som är tillräckligt små för att passa in i smartphones – i själva verket är processen redan igång (se Djupavkännande kameror till mobila enheter). Och totalt sett tror Folmer att när vanliga datorenheter blir mindre kommer de att vara mycket användbara för synskadade eftersom sådana enheter kommer att förlita sig på gränssnitt, som tal, som blinda har använt i årtionden.