Os investigadores criaram uma rede neural que analisou um vídeo de uma pessoa a fazer várias expressões e a mover a cabeça e conseguiu replicar esses movimentos para outro vídeo, de forma bastante realista. O sistema conseguiu também manipular algumas das sombras de fundo, replicar movimentos de boca, de sobrancelhas e outras expressões, com um resultado muito convincente.
O novo método destaca-se por apresentar vídeos finais mais realistas, sem se conseguir notar que houve este tipo de manipulação. O objetivo é aplicar a técnica para conteúdos de Realidade Virtual ou mesmo em pós-produção.
Justus Theis, que faz parte da equipa, revela ao The Register que estão cientes do impacto ético deste tipo de manipulações: «É também uma das razões pelas quais publicamos os resultados. É importante que as pessoas percebam as possibilidades destas técnicas de manipulação».
O estudo Deep Video Portraits foi apresentado durante a SIGGRAPH deste ano. Veja algumas das demonstrações mostradas com vídeos manipulados de Barack Obama, Vladimir Putin ou Theresa May.