211service.com
Googla på din TV
Google vet förmodligen redan vilka söktermer du använder, vilka webbsidor du tittar på och vad du skriver om i din e-post – trots allt, det är så det visar textannonserna riktade mot webbinnehållet på din skärm.

Peter Norvig, forskningschef på Google, säger att företagets arbete med ljud- och videobehandling – till exempel ett system som tillhandahåller webbinnehåll som matchar det som spelas på en användares TV – kommer att dyka upp så småningom i riktiga produkter. (Kredit: Google Inc.)
Ganska snart kan Google också veta vilka TV-program du tittar på – och kan använda den informationen för att skicka dig mer reklam, jäst med information som är relevant för ett program.
Ett system som nyligen skisserats av forskare på Google motsvarar personlig TV utan den tjusiga set-top-utrustning som krävs av tidigare (och misslyckade) försök med interaktiv tv. Deras prototypprogramvara, som beskrivs i en konferenspresentation i Europa i juni förra året, använder en dators inbyggda mikrofon för att lyssna på ljuden i ett rum. Den filtrerar sedan varje femsekunders ljudsnutt för att plocka ut ljud från en TV, reducerar klippet till ett digitalt fingeravtryck, söker på en internetserver efter ett matchande fingeravtryck från ett förinspelat program och, om det hittar en matchning, visar den annonser, chattrum eller annan information relaterad till det utdraget på användarens dator.
Att låta Google lyssna på dina aktiviteter i vardagsrummet kan låta som en integritetsmardröm. Med tanke på den senaste eldstormen över AOL:s oavsiktliga släppande av sökposter för 685 000 medlemmar, är konsumenter mer känsliga än någonsin för hur sökföretag kan missbruka personlig information, medvetet eller inte.
Men fingeravtryckstekniken som används i Googles prototyp gör det omöjligt för företaget att avlyssna andra ljud i rummet, till exempel personliga samtal, enligt Google-teamet. I slutändan, säger forskarna, är den enda personliga information som avslöjas preferenser för TV-tittande.
Googles forskningschef Peter Norvig förutspår att prototypen, som använder en ljudidentifieringsteknik som uppfunnits utanför Google och tillämpas på en unik stor databas med inspelat ljud, så småningom kommer att utvecklas till en produkt. Och det har väckt stor uppmärksamhet från teknikbevakare, som ser en stor potentiell vinst för Google och andra företag om ett system för att överbrygga TV- och webbinnehåll kan göras praktiskt. Men för närvarande är det fortfarande ett forskningsprojekt i ett tidigt skede.
Vi presenterade egentligen inte en ansökan som vi vill göra här och nu, utan snarare ett koncept, säger Michael Fink, ledande forskare i projektet. Fink jobbar på Interdisciplinary Center for Neural Computation vid Hebrew University i Jerusalem och spenderar sommaren på Google. Vi ville öppna människors sinnen för möjligheten att använda omgivande ljud som ett medium för att söka webbinnehåll, säger han.
Datavetenskapsforskaren Yan Ke och kollegor vid Carnegie Mellon University lade grunden för idén när de skapade programvara som reducerade ljudsegment till mycket små fingeravtryck. Programmet, som körs på en konventionell PC, omvandlar ljudstötar till tvådimensionella grafer och använder datorseendealgoritmer för att sålla bort bakgrundsljud och koka ner graferna till några nyckelfunktioner som sedan kan översättas till elektroniska bitar. På detta sätt kan en sekunds ljud reduceras till fyra byte information – vilket innebär att fingeravtrycken för ett helt års tv-program inte skulle bli mer än några gigabyte, enligt Fink.
I Googles prototyp överförs enbart fingeravtrycken från en användares hemdator till företagets ljuddatabasserver, där de jämförs med fingeravtrycken från nästan 100 timmars inspelad video. En speciell algoritm utvecklad av Fink och Googles kollegor Michele Covell och Shumeet Baluja minskar risken för felmatchningar; i tester uppnådde systemet en falsk positiv frekvens på mellan 1 procent och 6 procent, vilket betyder att endast sex eller färre gånger av 100 matchade ljudfingeravtryck från användaren med fel ljudavsnitt från ett inspelat program (med irrelevant information visas på användarens skärm som ett resultat).
Det är tillräckligt korrekt för att tv-tittare kan tycka att det kompletterande innehållet som Google skickar är användbart. Nicole Kidman-fans kan till exempel njuta av att veta vilken klänning hon har på sig i en sändning av Extra! eller var de kan köpa en liknande outfit. Eller så kan annonser för Cooper Minis dyka upp när bilen dök upp i en TV-återsändning av The Italian Job .
Allt detta skulle bara fungera om någon först manuellt noterade vad som visas på skärmen vid ett givet tillfälle i en sändning. Med mängden TV-program som sänds varje dag skulle det vara ett tråkigt jobb. Men i vissa fall kan det vara värt besväret för Google och annonsörer, säger Fink. Säg att jag är en annonsör och jag vill att en länk till min webbplats ska visas med ett specifikt avsnitt av Seinfeld . Vi kunde öppna varje ögonblick av ljud för en budgivningsprocess. Googles modell med annonsörer som lägger bud på relaterade ord på webbsidor, som har visat sig vara mycket framgångsrik online, skulle kunna föras över.
Och informationen som Google skickar behöver inte vara enkelriktad – den kan också bjuda in tittare som tittar på samma program samtidigt att gå med i ett chattrum och administrera undersökningar.
När ryktet om forskningen först dök upp i media, reagerade vissa bloggare och andra teknikbevakare med fasa; många antog att bakgrundskonversationen som plockades upp av mikrofonen i Googles system skulle laddas upp till Google. Men tekniken gör det opraktiskt; vid fyra byte innehåller fingeravtrycken inte tillräckligt med information för att rekonstruera de ursprungliga ljuden i ett rum. En del fick intrycket att vi hade en öppen mikrofon som skulle lyssna på dem, säger Norvig. Det var uppenbarligen inte det vi gjorde. Vi sänder en nyckel som kan matchas men inte vändas. Som sagt, användare ger upp viss information - och det är något de måste ta ställning till.
Om användarna skulle kunna anpassa sig till denna nya form av övervakning är osäkert. Men intäktsmöjligheterna är tydliga – om systemet fungerar vill säga. Det är ett djävulskt smart sätt att överbrygga den gamla och nya medietekniken, säger Michael McGuire, onlinemedieanalytiker på Gartner Research. Men allt skulle bero på hur exakt Google kunde matcha ljudsegment, säger han. Du kan föreställa dig att om de bara var en liten bit utanför, det skulle göra dig galen, när det gäller vilken typ av reklam du ser. Och om det var långt ifrån det du tittade på, skulle du bli arg och kanske arg.
Finks team arbetar med att göra antalet falska positiva ännu lägre – så att användare inte får Doritos-annonser med sin Masterpiece Theatre. Men det finns en annan utmaning, konstaterar McGuire: hur man delar tittarens uppmärksamhet. Förmodligen skulle programföretag och annonsörer inte vilja ha något så absorberande på datorn att det drar tittarna bort från själva sändningen. Och även om folkmassan som surfar på webben medan de tittar på TV redan vet hur man multitaskar, kanske de ignorerar eller blockerar onlinemedieströmmen om den börjar bli för påträngande. Så [Google] måste hitta en balans mellan informationsöverbelastning och effektiv reklam.