211service.com
En startups neurala nätverk kan förstå video
Under de senaste åren har forskare vid företag inklusive Google och Facebook gjort imponerande genombrott i träningsprogram för att förstå vad som händer i bilder, tack vare en teknik som kallas djupinlärning. Nu heter en startup Clarifai erbjuder en tjänst som använder djupinlärning för att förstå video.
Clarifais videobehandlingsprogram kan identifiera objekt och scener i video och tillhandahåller en tidslinje så att du kan hoppa till platsen där ett visst element visas.
Företaget säger att dess programvara snabbt kan analysera videoklipp för att känna igen 10 000 olika objekt eller typer av scener. I en demo som gavs förra veckan kl konferens om djupt lärande , Clarifais medgrundare och VD Matthew Zeiler laddade upp ett klipp som inkluderade bilder från ett varierat alpint landskap. Programvaran skapade en tidslinje med graflinjer som sammanfattar när olika objekt eller typer av scen upptäcktes. Den visade exakt när snö och berg uppstod individuellt och tillsammans. Programvaran kan analysera video snabbare än en människa kunde se den; i demonstrationen bearbetades klippet på 3,5 minuter på bara 10 sekunder.
Clarifai erbjuder tekniken som en tjänst och förväntar sig att den ska användas för saker som att matcha annonser med innehåll i onlinevideor eller utveckla nya sätt att organisera videosamlingar och redigera film.
Deep learning involverar bearbetning av data genom ett nätverk av enkla simulerade neuroner som har tränats med hjälp av exempeldata. Clarifais teknologi har sitt ursprung i forskning vid New York University, och 2013 tog företaget topp fem platserna vid den ledande årliga tävlingen för programvara som identifierar innehållet i bilder.
Den mesta forskningen inom området har hittills fokuserat på stillbilder, inte video. Clarifai lanserade en tjänst för stillbildsigenkänning förra året. En annan startup som använder djupinlärning, Till höger , lanserade sin egen videobearbetningstjänst i slutet av december.
Vem som helst kan testa Clarifais nya videosystem. På dess hemsida kan du ladda upp ett videoklipp på upp till 10 megabyte för analys. De olika objekten eller typerna av scen som upptäcks kan inkludera bilar, träd eller människor. Programvaran kan också tillämpa mer abstrakta beskrivande begrepp, som nöje eller samvaro.
Zeiler tror att hans teknik kan leda till ett nytt tillvägagångssätt för att visa reklam tillsammans med videor online. Programvaran kan identifiera var i videon är den optimala platsen för en annons att placeras, sa han.
Företag kan redan betala för att placera sina annonser bredvid videor av en viss typ eller sådana om ett visst ämne. Zeiler anser att det borde vara ännu mer attraktivt för annonsörer att kunna matcha annonser automatiskt med särskilda ögonblick i videor. Clarifais teknologi kan göra det möjligt för till exempel Starbucks att få sina annonser att visas när som helst kaffe konsumeras i film.
Zeiler säger att han redan arbetar med företag som är intresserade av att använda videoanalystekniken. Företaget arbetar också med att få mjukvaran att göra mer. Två funktioner under utveckling kommer att låta programvaran automatiskt sammanfatta vad som händer i en video och känna igen när en viss aktivitet har ägt rum, säger Zeiler.