Syvyyden tiedot voivat paljastaa deepfake-kuvat reaaliajassa

Uusi tutkimus Italiasta on osoittanut, että syvyyden tiedot, jotka saadaan kuvista, voivat olla hyödyllinen työkalu deepfake-kuvien havaitsemiseen – jopa reaaliajassa.

Vaikka suurin osa deepfake-havaitsemiseen liittyvistä tutkimuksista viimeisen viiden vuoden aikana on keskittynyt jäljen tunnistamiseen (jota voidaan lieventää parannetuilla tekniikoilla tai sekoittaa huonoon videokooderin pakkaamiseen), ympäristön valaistukseen, biometrisiin ominaisuuksiin, aikajärjestyksen häiriintymiseen ja jopa ihmisen vaiston, uusi tutkimus on ensimmäinen, joka ehdottaa, että syvyyden tiedot voivat olla arvokas salausavain deepfake-sisällölle.

Esimerkkejä johdettuista syvyyden kartastoista ja eroista havainnoimisen syvyyden tiedoissa oikeiden ja väärennettyjen kuvien välillä. Lähde: https://arxiv.org/pdf/2208.11074.pdf

Kriittisesti, uuden tutkimuksen kehittämät havainnontyökalut toimivat erittäin hyvin kevyessä verkossa, kuten Xception, ja hyväksytysti MobileNet, ja uusi tutkimus tunnustaa, että näiden verkkojen tarjoama alhainen viive voi mahdollistaa reaaliaikaisen deepfake-havainnon uutta suuntausta kohti live-deepfake-petoksia, jota edustaa äskettäinen hyökkäys Binancea vastaan.

Suurempi taloudellisuus johtuu siitä, että järjestelmä ei tarvitse täysivärisiä kuvia, jotta se voisi määrittää eron väärennettyjen ja oikeiden syvyyden kartastojen välillä, vaan se voi toimia yllättävän tehokkaasti ainoastaan syvyyden tiedon harmaasävykuvilla.