Möt killen med fyra armar, varav två av någon annan styr i VR

Bild av man som byter en boll med en hand av den robotarmade ryggsäcken.

Bild av man som byter en boll med en hand av den robotarmade ryggsäcken. Keio University Graduate School of Media Design, University of Tokyo





Yamen Saraiji har fyra armar, och två av dem ger honom en kram.

Lemmarna som omfamnar Saraiji är långa, gängliga och robotiserade, och de är kopplade till en ryggsäck han har på sig. Armarna styrs faktiskt på distans av en annan person, som bär ett Oculus Rift VR-headset, med vilket de kan se världen från Saraijis perspektiv (kameror kopplade till ryggsäcken säkerställer en bra sikt), och använda handhållna kontroller för att styra den icke-mänskliga armar och sammankopplade händer.

Efter kramen släpper robotarmarna Saraiji. Sedan ger höger hand honom en high five, och Saraiji ler.



Saraiji, en biträdande professor vid Tokyo-baserade Keio University Graduate School of Media Design, ledde utvecklingen av detta robot-armar-på-en-ryggsäck-projekt, kallat Fusion, för att utforska hur människor kan kunna samarbeta för att kontrollera (eller förstärka) en persons kropp. Även om några av handlingarna Saraiji visar mig via videochatt från hans labb i Japan är fåniga, tror han att enheten kan vara användbar för saker som sjukgymnastik och att instruera människor på långt håll.

Förutom att kramas och high-fiving kan operatören av robotarmar och händer plocka upp saker eller flytta runt armarna och händerna på den människa som bär ryggsäcken. De mekaniska händerna kan tas bort och ersättas med remmar som går runt ryggsäcksbärarens handleder om du verkligen vill fjärrstyra armarna. Enheten, som Saraiji skapade med kollegor vid Keio University och University of Tokyo, kommer att visas upp på Siggraf datorgrafik och teknisk interaktionskonferens i Vancouver i augusti.

Bild av en man i boxningsställning med robotarmad ryggsäck. Bild av man som spelar xylofonen bär robotarmad ryggsäck.

Robotarmarna kan spännas fast på bärarens handleder, vilket ger fjärroperatören mer kontroll över bärarens armrörelser.



Det har varit gott om andra insatser för att skapa extra lemmar som du kan bära, och det är faktiskt inte första gången Saraiji gör robotlemmar som är avsedda att fästa på en människa: han och de flesta av de andra Fusion-forskarna byggde tidigare en bärbar uppsättning armar och händer som heter MetaLimbs att en bärare kontrollerade med sina fötter.

Att ha lemmarna kontrollerade av någon annan – någon som kan vara i ett annat rum eller ett annat land, och i VR för att starta upp – är dock lite annorlunda. Saraiji säger att han ville se vad som skulle hända om någon annan på ett sätt kunde dyka in i din kropp och ta kontroll.

Ryggsäcken innehåller en PC som strömmar data trådlöst mellan robotarmsbäraren och personen som kontrollerar armar och ben i VR. Datorn ansluts också till en mikrokontroller, som låter den veta hur robotarmarna och händerna ska placeras och hur mycket vridmoment som ska appliceras på lederna.



Robotarmarna, var och en med sju leder, sticker ut ur ryggsäcken, tillsammans med ett slags kopplat huvud. Huvudet har två kameror som visar fjärroperatören, i VR, ett liveflöde av allt ryggsäcksbäraren ser. När operatören flyttar huvudet i VR spårar sensorer den rörelsen och får robothuvudet att röra sig som svar (det kan svänga åt vänster eller höger, luta upp och ner och svänga från sida till sida, säger Saraiji).

Det bärbara systemet drivs av ett batteri som varar ungefär en och en halv timme. Den är ganska tung och väger nästan 21 pund.

Naturligtvis är det fortfarande en prototyp, påpekar Saraiji.



Medan jag pratar med honom tar Saraiji på sig ryggsäcken och värvar en doktorand att bära VR-headsetet och hjälpa till att visa hur det fungerar. Jag ropar ut några kommandon, som att be robot-lem-operatören att plocka upp något. Till en början fumlar han med en gnistrande gul leksak med tecknade ögon, och lyckas sedan ta tag i den och ge den till Saraji; sedan tar en av robotens händer tillbaka leksaken och ger den tillbaka till Saraji igen. Vid ett tillfälle går Saraiji bakom killen som använder armarna i VR, så operatören kan knacka sig själv på axeln med en av robotens fingrar och ge sig själv en förkortad halsgnidning.

Olika knappar på Oculus Rift-kontrollerna möjliggör olika fingerfunktioner: operatören kan flytta pinky-, ring- och långfingret på varje robothand samtidigt med en enda knapp, medan tummen och pekfingret har sina egna kontroller.

Bror Igo Krebs , en ledande forskare vid MIT som har ägnat decennier åt att studera rehabiliteringsrobotik, tror inte att projektet skulle vara praktiskt för rehab. Men han kan föreställa sig att det är till hjälp i många olika situationer - att hjälpa en astronaut i yttre rymden, till exempel, eller en ambulanspersonal med en obekant medicinsk procedur.

Saraiji säger att han skulle vilja förvandla projektet till en verklig produkt, och han och hans medarbetare håller på att pitcha det till en Tokyo-baserad startaccelerator.

Dölj