211service.com
Kinect förvandlar vilken yta som helst till en pekskärm
En ny prototyp kan förvandla en bärbar dator till en bärbar dator, en vägg till en interaktiv skärm och din handflata till en smarttelefonskärm. Faktum är att forskare vid Microsoft och Carnegie Mellon University säger att deras nya axelmonterade enhet, kallad OmniTouch, kan förvandla vilken yta som helst i närheten till en ad hoc interaktiv pekskärm.
Hands-on skärm: Ett proof-of-concept-system gör att smarta telefoner kan använda praktiskt taget vilken yta som helst som en touch-baserad interaktiv display.
OmniTouch fungerar genom att sammanföra en miniatyrprojektor och en infraröd djupkamera, liknande den som används i Microsofts Kinect-spelkonsol, för att skapa ett axelburet system utformat för att samverka med mobila enheter som smarta telefoner, säger meduppfinnaren. Chris Harrison , en doktorandforskare vid Carnegie Mellons Human-Computer Interaction Institute i Pittsburgh och en tidigare praktikant vid Microsoft Research. Istället för att förlita sig på skärmar, knappar eller tangenter övervakar systemet användarens miljö för alla tillgängliga ytor och projicerar en interaktiv skärm på en eller flera av dem.
OmniTouch gör detta automatiskt och använder djupinformationen från kameran för att bygga en 3D-modell av miljön, säger Harrison. Kameran får djupinformation om scenen genom att sända ut en mönstrad stråle av infrarött ljus och använda reflektionerna för att beräkna var ytorna finns i rummet. Detta eliminerar behovet av externa kalibreringsmarkörer. Systemet bygger om modellen dynamiskt när användaren eller ytan rör sig – till exempel positionen för en hand eller vinkeln eller orienteringen av en bok – så storleken, formen och positionen för dessa projektioner matchar de på de improviserade displayytorna, han säger. OmniTouch räknar ut vad som finns framför dig och passar allt på den.
Systemet övervakar också miljön för allt cylindriskt och ungefär fingerstort för att fungera när användaren interagerar med det, återigen med hjälp av djupinformation för att avgöra när ett finger eller fingrar kommer i kontakt med en yta. Detta låter användare interagera med godtyckliga ytor precis som de skulle göra med en pekskärm, säger Harrison. På samma sätt kan objekt och ikoner på ad hoc-skärmarna svepas och nypas för att rulla och zooma, ungefär som på en traditionell pekskärm. I en demonstrationskonstapplikation använde OmniTouch till exempel en närliggande vägg eller ett bord som en duk och användarens handflata som färgpalett.
Den axelmonterade uppställningen är helt opraktisk, medger Hrvoje Benko , en forskare inom Natural Interaction Research Group vid Microsoft Research i Redmond, Washington, som också arbetade med projektet, tillsammans med kollega Andrew Wilson . Men det är inte var man monterar den som räknas, säger han. Kärnmotivationen var att driva denna idé att förvandla vilken tillgänglig yta som helst till en interaktiv yta. Alla komponenter som används i OmniTouch är från hyllan och krymper hela tiden. Så jag tror inte att vi är så långt ifrån att det görs till ett hänge eller fästs på glasögon, säger Benko.
Duncan Brumby , en forskare vid University College London Interaction Center, i England, kallar OmniTouch för en rolig och ny form av interaktion. Skärmstorlekarna på mobila enheter kan vara begränsande, säger han. Det finns ett växande intresse för det här området att ha allestädes närvarande, immateriella skärmar inbäddade i miljön, säger han. Och även om nya generationer av smarta telefoner tenderar att ha skärmar med allt högre kvalitet, tror Brumby att användare skulle vara villiga att stå ut med projicerade bilder av lägre kvalitet, givet de rätta applikationerna.
Exakt vilka tillämpningar är svårt att förutse, säger Harrison. Det är en möjliggörande teknik, precis som pekskärmar. Pekskärmar i sig är inte så spännande, säger han – det är vad du gör med dem. Men teamet har byggt flera exempelapplikationer; en tillåter användare att praktiskt taget kommentera ett fysiskt dokument, och en annan innehåller handgester för att låta OmniTouch avgöra om informationen som visas ska göras offentlig eller hållas privat.
Att använda sådana här ytor är inget nytt, säger man Pranav Mistry en forskare vid MIT:s Media Labs. För två år sedan demonstrerade Mistry ett system som heter Sjätte sinne , som projicerade skärmar från ett hängsmycke på närliggande ytor. I originalversionen använde Mistry markörer för att upptäcka användarens fingrar, men han säger att han sedan dess också har använt en djupkamera. Nyheten här [med OmniTouch] är tekniken, säger han. Det nya är noggrannheten och att göra den mer robust.
OmniTouch-teamet testade faktiskt systemet på 12 ämnen för att se hur det jämfört med traditionella pekskärmar. Presenterar sina resultat denna vecka på ACM Symposium om Användargränssnitt programvara och teknik i Santa Barbara visade teamet att det var möjligt att visa otroligt små knappar, bara 16,2 millimeter stora, innan användarna hade problem med att klicka på dem. Med en traditionell pekskärm är den nedre gränsen vanligtvis runt 15 millimeter, säger Harrison.