Varför NASA vill ha Microsofts HoloLens i rymden

Explosionen i juni av SpaceX-raketen som var på väg till den internationella rymdstationen kändes som ett slag i magen för Jeff Norris, projektledare för två HoloLens-projekt som NASA arbetar med vid sitt Jet Propulsion Laboratory (JPL) i Pasadena, Kalifornien. Bland föremålen ombord fanns två HoloLens-headset – Microsofts kommande augmented-reality-prylar.





Astronaut Luca Parmitano använder HoloLens

Astronaut Luca Parmitano använder HoloLens vid undervattensbasen Aquarius Reef, som ligger nedanför Florida Keys.

Men inom ett par veckor, säger Norris, hade hans team på NASA och hans motsvarigheter på Microsoft ny HoloLens-hårdvara som de certifierat för uppskjutning i rymden. Det är nu planerat att ske den 3 december som en del av en kommersiell lastuppskjutning av flygföretaget Orbital Sciences för att återförsörja rymdstationen.

Här på jorden kan enheter med förstärkt verklighet så småningom användas för en rad saker som att spela spel som blandar digitala 3D-varelser med verkligheten eller prata med vänner på avstånd som om de var i ditt vardagsrum. Men NASA ser ett antal praktiska – och möjligen tidsbesparande – användningsområden för tekniken i rymden.



NASA hoppas kunna använda HoloLens ombord på rymdstationen för att tillåta astronauter att arbeta med en fjärrexpert som kan se vad astronauten ser och hjälpa till med okända uppgifter. Enheten kan också fungera som en bruksanvisning för utökad verklighet som till exempel använder 3D-bilder för att visa en astronaut var den ska placera utrustning eller vilket handtag som ska vändas. (Microsofts vd Satya Nadella sa nyligen i en intervju att HoloLens kommer att vara tillgänglig för utvecklare inom det närmaste året; tidpunkten för en konsumentrelease är fortfarande okänd.)

I slutet av juli och början av augusti försökte NASA-astronauter använda HoloLens för att hjälpa till med flera uppgifter vid Aquarius Reef Base.

Norris, som också är ledare för Ops Lab på JPL, säger att NASA också arbetar med andra applikationer för HoloLens, som att använda förstärkt verklighet för lagerhantering. Tydligen är det en stor utmaning att hålla reda på var saker finns och hur man hittar dem på rymdstationen, även om objekt har streckkoder på sig och är organiserade med en databas. NASA har tagit fram en prototyp för en app som kan användas för att känna igen ett objekt och visa HoloLens-bäraren en väg att följa som leder till var objektet ska förvaras, säger Norris.



Under tiden, för att få en känsla av hur det kommer att vara att använda HoloLens på rymdstationen, experimenterade NASA med HoloLens vid Vattumannen undervattensforskningsstation utanför Key Largos kust, Florida, i slutet av juli och början av augusti. Astronauter använde enheten för uppgifter som att kontrollera nödandningsutrustning genom att gå igenom en rad steg, allt från att vrida ventiler till att hitta och koppla in utrustning och ställa in utrustning för att stödja en undervattensrobot.

I båda fallen hjälpte en expert som satt i ett fjärrkontrollcenter på torra land till genom att använda ett Skype-program som Microsoft byggt för HoloLens (se Reality Check: Comparing HoloLens och Magic Leap ) där en framåtriktad kamera på HoloLens låter experten se vad astronauten såg. Vid behov kunde fjärrexperten rita i luften för att peka ut saker som astronauterna skulle se med HoloLens-headsetet (hela tiden kunde astronauterna också se en flytande video av experten framför sina ansikten). Norris tror att uppgiften skulle ha tagit många gånger så lång tid om den bara hade skrivits ut som en procedur att följa.

Även om han tror att det kan vara till hjälp, säger Norris också att det finns enorma utmaningar förknippade med att bygga applikationer med förstärkt verklighet, som att ta reda på hur en applikationsmeny ska se ut och hur användaren ska interagera med den när den inte visas på en bärbar dator eller smartphone skärm.



Reglerna är annorlunda när du nu återger information runt en person, säger han.

Dölj