Trolla musik, utan instrument

Jag har aldrig dirigerat en orkester förut, men jag föreställer mig att det måste föra med sig en enorm kraftkänsla. Med bara att vifta med armarna strömmar en symfoni fram. Tempot, rytmen, musikens dynamik framtrollas alla av din kropps rörelser – och du håller inte ens ett instrument.





Imogen Heap, den Grammy Award-vinnande musikern, måste känna något liknande efteråt debuterar ett par av musikhandskar den senaste tiden TEDGlobal konferens i Edinburgh. Med ett team av ljudtekniker på Fifth Dimension Technologies och x-IO, bidrog Heap till utvecklingen av teknikladdade handskar som gör att hon kan komponera, arrangera och framföra musik.

Det hela låter ungefär så svårfångat (och överreferat ) Minoritetsrapport gränssnitt, endast tillämpat på musik. Tyvärr verkar TED-videon inte vara live än, men Mashables beskrivning ger ett smakprov på hur det fungerar: Dessa rörelser inkluderar till exempel möjligheten att spela in en loop genom att öppna handen, filtrera ljud genom att föra ihop händerna och panorera genom att peka i önskad riktning. Volymen kan också manipuleras med vissa passande gester - en 'shh'-rörelse initierar tyst läge och en hornskylt uppmanar 'rock out-läge.' Heap har sagt att hon skulle vilja börja använda handskarna i sina konferenser, och en dag kanske att bygga en hel timslång konsert som går på scen med bara handskarna.

Heap fick idén till handskarna efter att ha sett ett liknande par utvecklat av en MIT-forskare vid namn Elly Jessop (en medlem av Framtidens Opera forskargrupp där). Som Tom Mitchell, en forskare från University of West England i Bristol som är involverad i projektet, säger till mig i ett e-postmeddelande, började Imogen senare drömma om ett system som skulle göra det möjligt för henne att framföra en hel show live utan att behöva koppla av från publiken att utföra okända interaktioner med elektronisk utrustning. (Mitchells samarbete med Heap är något långvarig .)



Den föreställningen – att de gester som styr musiken själva skulle bli en del av föreställningen – var kärnan i projektet. Fortsätter Mitchell: En av de största utmaningarna och framgångarna med arbetet är betoningen på prestation som föregick allt utvecklingsarbete. Imogen har varit där varje steg på vägen för att diskutera utformningen av gesterna och deras kartläggning på ljudprocesser.

Mitchell varnar för att handskar som Heaps förmodligen inte kommer att bli utbredda när som helst för tidigt. Huvudfaktorn här är tillgängligheten, bekvämligheten och kostnaden för den nödvändiga tekniken, säger han. Det är inte bekvämt att behöva ställa in extern spårningsutrustning som kameror när du vill göra något. Handskarna i sig är ett knippe av ett dussin olika tekniker - det finns olika sensorer, ett gyroskop, trådlösa mikrofoner, en accelerometer, en magnetometer. Det skulle krävas avsevärd forskning och utveckling för att kommersialisera ett sådant paket.

Det har dock skett mer forskning och utveckling inom gesturmusikens sfär än du kan föreställa dig – vi har tagit oss långt bortom den gesturala sci-fi-musiken, thereminen. Michel Waisvisz, som debuterade med sitt musikaliska gränssnitt, dubbade Hands, på 80-talet, var en pionjär här. Här är en video- av honom som uppträder med dem på Nya gränssnitt för musikaliskt uttryck konferens, som i 11 år har hjälpt till att stimulera forskning av den sort som ledde till Imogen Heaps handskar.



En dag i framtiden kommer då en handgjord cello att verka lika förlegad som kuriosa som den pappersbundna boken?

Dölj