Real-Time Face Capture Software vil gjøre Donald Trump din digitale dukke

Real-Time High-Fidelity Facial Performance Capture

Real-Time High-Fidelity Facial Performance Capture
Anonim

Millennials! De kaprer nå YouTube-videoene av Vladimir Putin og Donald Trump for å tvinge dumme munnbevegelser på dem. Og det er en glede.

Et oppdatert program fra tyske og californiske forskere kan manipulere YouTube-videoer i sanntid, translokere fishy gasps fra studenter på George Bushs ansikt.

Det bygger på tidligere arbeid som Stanford University besøker datavitenskapsmann Matthias Niessner beskriver til New York Times som "live ansikts re-enactment."

Kort sagt, algoritmen trener seg på et segment av målvideo (si et klipp av Arnold Schwarzenegger snakker) og lager et tilsvarende kart av piksler for kilden ansiktet (som en gradstudent) fra en webkamera. Identiteten, belysningen og stillingen til målskuespilleren forblir den samme, men algoritmen stjeler kildens uttrykk og klistrer den over målet.

Det nye programmet er bedre å gjengi innsiden av målets munn, som det gjør med gnarly realisme:

Forskerne sier at deres reenactment, som presenteres på datakonferansen CVPR i juni, kunne forbedre filmkopiering eller Skype-samtaler. (Koble en automatisk oversettelse programvare med denne bildet kartlegging teknikk, ideen går, kan gjøre det virke som om to utlendinger snakket naturlig i hverandres tunger.)

Men akkurat som troll kan misbruke Photoshop, er potensialet for ondsinnede applikasjoner ikke tapt på YouTube-kommentatorer - som man sier: "Dette er for langt. Veldig skummelt potensial for misbruk. Ikke forfølg dette for det gode menneskeheten."

Heldigvis er konverteringen ikke 100 prosent øyeblikkelig; Det tar 30 millisekunder, noe som er for fort for et menneske å oppdage, men ikke i teorien for fort for et dataprogram å filtrere ut. Dessuten, akkurat som det er måter å fortelle om et bilde har vært Photoshopped-warped linjer og inkongruøs belysning er telltale tegn - Stanford University forskerne mener at lignende deteksjon teknikker ville oppstå hvis slik levende reenactment programvare ble utbredt.

I mellomtiden, hvis du er en høyttaler som er i fare for å bli et lek for en Gen-Y'er med et hode fullt av datakunnskap og et hjerte fullt av studielånsgjeld, unngå å bli ansiktskonfigurert ved å fortsette å vinke hånden foran av ansiktet ditt eller rykke hodet fra side til side. Re-enactment programmet kan ikke finne ut fingrene eller håndtere bevegelse utover en 30 graders vinkel fra nakken. Her er til flere statlige unions headbanging.