Programvaran rekonstruerar kända ansikten från stillbilder, fångar deras unika manérismer

Dagens mardrömsfoder: de okroppsliga ansiktena hos nio olika politiker och kändisar – inklusive Barack Obama – allt i synkronisering med den tidigare presidenten George W. Bushs uttrycksfulla egenheter. Det är som om Bush tog på sig nio olika fotorealistiska masker, och effekten är overklig. (Avsnittet i fråga börjar 01:30 i videon.)

Den här videon skapades av ett team av forskare från University of Washington som ville svara på frågan Vad får Tom Hanks att se ut som Tom Hanks? För att göra det utvecklade de maskininlärningsalgoritmer som bryter internet för bilder av en person och använder dem för att skapa en tredimensionell rekonstruktion av den personens ansikte som inte bara fångar funktioner utan också unika uttryck och manér.

De kan synkronisera ett ansikts persona med ett av de återskapade ansiktena, som med exemplet som kartlägger Bushs manér på Obamas ansikte. Men deras mjukvara fungerar också åt andra hållet: att kartlägga en persons prestanda på en annans ansikte samtidigt som den andra ansiktets persona bevaras. Som förklarat av medförfattaren och professorn i datavetenskap Steven Seitz i ett pressmeddelande : Hur kartlägger du en persons prestation på någon annans ansikte utan att förlora sin identitet? […] Vi har visat att du kan ha George Bushs uttryck och mun och rörelser, men det ser fortfarande ut som George Clooney.

Teamet har stora förhoppningar om att använda tekniken. Tänk om du kunde bygga tredimensionella rekonstruktioner av avlidna nära och kära att använda med den inkommande vågen av virtuell verklighetsteknik; rekonstruktioner som fångar form av personen i fråga?

För mig har de en väg att gå – de här videorna är kusliga men inte riktigt övertygande. Ändå är det ett onekligen fascinerande proof-of-concept. Pressmeddelandet nämner inget om potentiella tillämpningar inom historia eller arkeologi – men skulle det inte vara fantastiskt om vi kunde använda det historiska dokumentet inte bara för att skapa en tredimensionell bild av Abraham Lincoln utan en som också fångade en del av hans personlighet som väl?

Teamet kommer att presentera sina senaste rön på Internationell konferens om datorseende i Chile den 16 december.

Dölj