En ny AI skapar originalvideoklipp från textsignaler

Kategori: Artificiell intelligens Postad 26 feb

En kort, maskinskriven beskrivning av en scen räcker för att få den här programvaran att göra film.





Hur det fungerar: Vetenskap rapporterar att AI använder två neurala nätverk – ett för att skapa video, ett annat för att bedöma om det är realistiskt för att förbättra det förstas utdata. Vi utnämnde dessa typer av AI till en av våra 10 genombrottsteknologier 2018.

Vad den gör: Först tränas systemet på bilder av aktiviteter märkta med beskrivningar som 'spela golf på gräs.' Den kan sedan återskapa liknande scener med ett stycke text. Dessutom kan den göra klipp som kombinerar olika koncept från träningsdata, som att 'segla på snö.'

Varför det är viktigt: Automatisk generering av video från text kan vara oerhört användbar - för att skapa enorma uppsättningar syntetisk träningsdata för autonoma bilar, till exempel. Det kan också leda till en del oroande falskt innehåll.



Men: Klippen är bara 32 bildrutor långa och 64x64 pixlar i storlek. De är fortfarande inte helt övertygande, och om de görs större, sjunker noggrannheten. Allt som behöver fixas för att bygga en användbar text-till-video-konverterare.