Photosynth för video och andra TechFest-godsaker

Varje år håller Microsoft ett öppet hus som heter TechFest för att visa upp några av dess mer flashiga forskningsprojekt. I år hade evenemanget i Redmond, WA 37 demos, allt från gestbaserade gränssnitt till förstärkt verklighet och bättre bildsökning. Nedan är en kort sammanfattning av några av de projekt som visades upp på tisdagen som fångade mitt öga.

1. Photosynth för video

Tre mobila videoströmmar kombineras till en panoramavideo i realtid med hjälp av ny programvara utvecklad av Microsofts forskare. Kredit: Microsoft Research

Baserat på Photosynths popularitet är det inte förvånande att Microsofts forskare nu försöker utöka tekniken till video. Den vanliga programvaran syr sömlöst ihop bilder tagna på en viss plats, från olika kameror, för att skapa en zoombar, panorerbar panoramabild. Den nya idén är att flera personer – ögonvittnen vid en nyhetshändelse eller fans på en musikkonsert, till exempel – spelar in video av händelsen på sina mobiltelefoner och streamar den till en central server. Med hjälp av telefonernas platser och med hjälp av bildigenkänningsalgoritmer organiserar och delar mjukvaran ihop mobilen till en större scen.

Ayman Kaheel, en ingenjör i Microsofts Kairo-labb, demonstrerade programvaran i kongresshallen genom att hålla upp två mobiltelefoner, i kameraläge, på olika höjder och pekade i lite olika riktningar. På hans bärbara dator slogs de två videoflödena samman i realtid för att skapa en större, mer komplett video. Imponerande grejer.

2. Att skriva i luften

Ett av problemen med videospelssystem är att det är svårt för en spelare att skriva in text, namnge en spelkaraktär eller chatta med andra spelare i ett nätverk till exempel. Eftersom vissa av dessa system spelas på datorer med webbkameror eller infraröda kameror (som Wii), resonerade forskare vid Microsofts forskningscenter i Peking att handviftande gester skulle kunna ersätta den traditionella och klumpiga textinmatningen.

Forskarna skrev programvara som spårar rörelsen av ett färgstarkt föremål, som ett äpple eller en boll, i en användares hand och tolkar, baserat på objektets väg, karaktären som användaren skisserar i luften. Hsiao-Wuen Hon , säger direktören för Microsoft Research Asia att systemet fungerar bra för kinesiska tecken, och borde vara ännu bättre med engelska eftersom det finns mycket färre av dem.

3. En färgpalett för bättre bildsökning

Dagens bildsökmotorer gör ett anständigt jobb – upp till en viss punkt. Sök efter en tiger så får du i allmänhet en samling orange, vita och svarta stora katter. Men just nu är det nästan omöjligt att justera en sökning för att hitta till exempel en tiger på vit bakgrund eller en svartvit tiger mot blå himmel.

Xian-Sheng Hua , en forskare vid Beijing-centret och en TR35 från 2008 tror att han har hittat ett bättre sätt att komma in på den högra bilden. Hans sökgränssnitt tillhandahåller en färgpalett vid sidan av resultaten och en rutor som en användare kan fylla med färger från paletten för att vinna sökningen. Om du till exempel vill söka efter en tiger med blå himmel fyller du bara några rutnät högst upp på torget med blått och söker efter tiger igen. Detta färgbaserade filtreringssystem eliminerar behovet av att använda extra metadata eller taggar som beskriver scenen. Hsiao-Wuen säger att ett sådant gränssnitt skulle vara relativt enkelt att integrera i dagens sökmotorer.

4. Ytan går i 3D

Surface verkar vara Microsoft Researchs älskling. Multi-touch bordsskivan är det högprofilerade projektet som tog den snabba vägen från labbet till konsumenterna. Och nu, Andy Wilson , en av forskarna som arbetade på Surface riktar sin uppmärksamhet mot ett beröringsgränssnitt på himlen.

På TechFest demonstrerade Wilson ett projektor- och infrarött kamerasystem som producerar bilder inuti en kupol och kan känna igen gester gjorda av människors händer. I demon projicerades bilder från Microsofts World Wide Telescope, som ger en virtuell rundtur på natthimlen, på kupolen; en forskare panorerade och zoomade över stjärnorna med en hand och en nypa tummen. Wilson tror att hans team skulle kunna bygga systemet tillräckligt billigt för att det ska kunna användas i skolplanetarier, eller var som helst där människor vill interagera med stora panoramaprojektioner.

Dölj