Med Fire Phone kan Amazon popularisera visuell sökning

Amazon är uppenbarligen på en strävan efter att göra det så snabbt som möjligt att köpa vad du vill, när du vill ha det (om du behöver det är en annan fråga), och smartphonen som online-återförsäljaren presenterade i går är dess senaste verktyg för att få det att hända . Genom att göra det kan det dock också vara att skapa en kraftfull ny mobil sökmotor som kan utvecklas till ett enklare sätt att hitta all slags information i farten.





Under gårdagens event i Seattle introducerade Amazons grundare och VD Jeff Bezos Fire Phone – en svart telefon som kör en modifierad version av Googles Android-system och som ser ganska lik ut som otaliga andra som redan finns på marknaden. Telefonen, som kommer att finnas tillgänglig den 25 juli, är initialt endast tillgänglig via AT&T och kommer att kosta 199 $ med ett tvåårskontrakt.

Några funktioner skiljer Elden från varandra, framför allt en skanningsteknik som kallas Eldfluga , som låter dig inte bara ta bilder av QR-koder och streckkoder för att hitta produkter, utan även ta bilder, video och ljud av alla typer av saker du kanske vill köpa. (I en demo var de flesta av de fysiska föremålen som Bezos visade antingen platta eller mestadels platta med viss krökning och innehöll lite text.) Fånga några sekunder av en låt eller en film, eller ta en ögonblicksbild av en bok, så dyker upp viss information som namnet på låten du hör och dess Amazon-kundbetyg. Bragden är inte revolutionerande i sig, men Amazon kombinerar många bild-, ljud- och textigenkänningstekniker i en funktion, och i en demonstration verkade det fungera ganska snabbt.

För att få Firefly att fungera matchar Amazon vad telefonens kamera ser med information från sin produktdatabas. Och, intressant nog, det tillåter utvecklare att använda Firefly i sina egna appar . Det kan betyda allt från multimediajakt till snabbare tillgång till näringsdata. Bezos använde exemplet med en app som heter MyFitnessPal, som kunde använda Firefly för att känna igen något som en påse Cheetos och visa dess näringsdata. Bezos indikerade också att utvecklare kunde använda Firefly med sin egen bildigenkänningsteknik och databaser med kända objekt.



Den avancerade smartphonemarknaden är redan full, men med tanke på uppkomsten av mobil e-handel är det ett steg värt att ta (se Varför Amazon behöver sin egen telefon). Det är också tydligt att Amazon avser att Firefly ska hjälpa det att sälja mer saker: 70 miljoner av de mer än 100 miljoner saker Firefly för närvarande kan känna igen är produkter som böcker och videospel, och resten är låtar som du kommer att kunna beställa på Amazon.com eller lägg till din Amazon önskelista. Men utöver att kanske ändra hur vi handlar, kan funktionen förändra hur vi söker och uppmuntra oss att använda bilder för att ta reda på mer om världen omkring oss – snarare än att skriva ord i en sökruta.

Jag tror att det kommer att vara en mycket beroendeframkallande förmåga, säger Ramneek Bhasin, general manager för mobil och vice vd för produkt för shopping sökmotor TheFind .

Bhasin är intresserad av att använda Firefly för att utöka TheFinds sökmöjligheter. Företaget inkluderar redan streckkodsskanning i sina mobilappar, till exempel, men han föreställer sig scenarier utan shopping där det kan vara användbart för att hitta information. På museer kan den dra upp Wikipedia-artiklar när den fokuserar på ett konstverk (Amazon säger att det kommer att lägga till bildigenkänning för konstverk till Firefly senare under året).



Nick Shiftan, teknisk chef och medgrundare av Curalate, en startup som använder bildigenkänning för att berätta för företag när deras produkter visas på sociala nätverk, tror att en fysisk knapp för att komma åt Firefly på Fire Phone kommer att hjälpa till att popularisera visuell sökning helt enkelt genom att göra det lättare att komma åt. För att använda något liknande måste användare för närvarande ladda en tredjepartsapp.

Jag vet inte riktigt ännu vad det långsiktiga användningsfallet kommer att vara här, men jag tror att vi nu antar att allas telefoner kan känna igen en låt du hör på radion eller en låt du hör i baren, och jag tror vi kommer att växa och förvänta oss samma sak från visuell sökning också, säger han.

Det kan vara, men det återstår mycket arbete för att detta ska bli verklighet. Även om en smartphone kanske kan känna igen något platta föremål som böcker, är det fortfarande väldigt svårt att urskilja föremål som en handväska eller ett gosedjur. Det beror på att det finns alla möjliga faktorer att ta hänsyn till när du tar en bild av objektet, såsom vinklar, skuggor och belysning, så att det kan matchas mot kända objekt i en databas. Och det kan bli svårare – och långsammare – att avgöra en matchning med auktoritet när databasen blir större.



Det finns fortfarande ett gap mellan vetenskap och fiktion där; vad vi skulle vilja göra och vad den senaste tekniken tillåter, säger Shiftan.

Dölj