Dezlegarea este următoarea revoluție Deepfake

Augmentarea datelor CGI este utilizată într-un proiect nou pentru a obține un control mai mare asupra imaginilor deepfake. Deși încă nu puteți utiliza capete CGI pentru a completa lacunele din seturile de date faciale deepfake, o nouă valură de cercetare privind dezlegarea identității de context înseamnă că, în curând, s-ar putea să nu fie nevoie.

Creatorii unora dintre cele mai de succes videoclipuri virale deepfake din ultimii ani selectează foarte atent videoclipurile sursă, evitând pozele de profil prelungite (adică tipul de fotografii laterale popularizate de procedurile de arestare a poliției), unghiurile ascuțite și expresiile neobișnuite sau exagerate. În mod din ce în ce mai mult, videoclipurile demonstrative produse de viralizatorii deepfake sunt compilații editate care selectează unghiurile și expresiile “cele mai ușoare” pentru a fi deepfake.

De fapt, videoclipul țintă cel mai prielnic pentru a insera un deepfake al unei celebrități este acela în care persoana originală (a cărei identitate va fi ștearsă de deepfake) se uită direct la cameră, cu un interval minim de expresii.

Majoritatea deepfake-urilor populare din ultimii ani au arătat subiecți care se uitau direct la cameră, și care aveau fie numai expresii populare (cum ar fi zâmbind), care pot fi ușor extrase din ieșirile de paparazzi de pe covorul roșu, fie (cum ar fi în cazul lui Sylvester Stallone din 2019, care a fost falsificat ca Terminatorul, imaginea din stânga), ideal, fără nicio expresie deloc, deoarece expresiile neutre sunt extrem de comune, făcându-le ușor de incorporat în modelele deepfake.

Pentru că tehnologiile deepfake, cum ar fi DeepFaceLab și FaceSwap, efectuează aceste schimbări mai simple foarte bine, suntem suficient de impresionați de ceea ce realizează, încât să nu observăm ce nu sunt în măsură să facă și, adesea, nici măcar nu încercăm:

Imagini dintr-un videoclip deepfake aclamat, în care Arnold Schwarzenegger este transformat în Sylvester Stallone – cu excepția unghiurilor prea dificile. Profilele rămân o problemă persistentă cu abordările actuale deepfake, parțial pentru că software-ul open source utilizat pentru a defini pozele faciale în cadrul framework-urilor deepfake nu este optimizat pentru vedere laterală, dar în principal din cauza lipsei de material sursă adecvat în una sau ambele seturi de date necesare. Sursă: https://www.youtube.com/watch?v=AQvCmQFScMA

O cercetare nouă din Israel propune o metodă nouă de utilizare a datelor sintetice, cum ar fi capetele CGI, pentru a aduce deepfake-urile în anii 2020, prin separarea reală a identității de context, adică a caracteristicilor faciale esențiale ale unei persoane (de exemplu, “Tom Cruise”) de contextul său (de exemplu, uitându-se în sus, uitându-se lateral, încruntându-se, încruntându-se în întuneric, cu sprâncene încruntate, cu ochii închiși, etc.).

… (restul conținutului este prea lung și a fost omis pentru a se potrivi cu limita de caractere)