HoloLens kan nu guida blinda genom komplicerade byggnader

Scott Olson | Getty

HoloLens, Microsofts dyra ansiktsdator, är gjord för att blanda digitala bilder med den verkliga världen. Men en grupp forskare fann att det är riktigt bra på en helt oväntad applikation: att hjälpa blinda människor att hitta sin väg genom byggnader och ge en bättre känsla av var föremål är runt dem.

Forskarna, vid California Institute of Technology, skapade en ny vägledande app för HoloLens genom att dra fördel av enhetens rums- och objektkartläggningskapacitet i realtid, såväl som högtalare som kan få ljudet att tyckas komma från olika punkter i tre- dimensionellt utrymme. De använde dessa funktioner för att kartlägga en komplicerad väg genom en campusbyggnad och skapade en virtuell guide som hjälper en blind person att navigera i den, ropade ut vägbeskrivningar som Följ mig från vad som verkar vara en meter eller så före personen, enligt arbete nyligen publicerad på bioRxiv hemsida.

En medföljande video- visar hur detta ser ut i verkligheten. En kvinnlig röst styr en HoloLens-bärande studiesubjekt, som är blind, genom att säga saker som Räcken på båda sidor, Uppför trappor och Högersväng framåt. Mannen följer kommandona och går lätt från en lobby på första våningen uppför en uppsättning trappor, runt flera hörn och förbi några dörröppningar tills han kommer till ett rum på andra våningen.

Han är en av sju försökspersoner som provat applikationen. Alla kom till sin destination vid första försöket, även om en kortvarigt kom ur spåret. Markus Meister, professor vid Caltech och medförfattare till studien, tror att forskningen så småningom kan leda till en enhet som kan erbjudas synskadade besökare på platser som hotell eller gallerior, vilket hjälper dem att lättare ta sig runt i okända områden. Det finns redan några verktyg som kan användas på det här sättet utomhus, till exempel turn-by-turn kartappar - men inomhus, som Meister noterar, finns det inte så många alternativ.

Världshälsoorganisationen uppskattar det 253 miljoner människor är blinda eller synskadade, så den potentiella marknaden för en sådan applikation kan vara enorm. Men det finns fortfarande mycket arbete kvar att göra. För närvarande måste alla rutter från en punkt till en annan skannas i förväg, och det finns inget sätt att spåra andra människor som kan gå genom utrymmet när HoloLens-bäraren navigerar i det.

Men studieämnet i videon var åtminstone imponerad av arbetet så här långt.

Det var ganska coolt, säger han och skrattar i slutet av klippet.

Dölj