Gerçek Zamanlı DeepFake Akışı ile DeepFaceLive

Dünyanın en çok kullanılan deepfake yazılımı ve deepfake porn ile en çok ilişkili olan yazılım, yeni bir uygulama kazanuyor – canlı webcam görüntülerine deepfake benzerliklerini süperimpoze etme yeteneği.

Açık kaynak depoları DeepFaceLive, DeepFaceLab temelinde oluşturulmuş bir Windows 10 uygulamasıdır. Her iki proje de liste deepfake porn sitesinin forum bölümünü resmi bir destek kaynağı olarak listeler.

Geliştirici Ivan Petrov tarafından Nisan ayında yayınlanan DeepFaceLive arayüzü videosunda, indirilen Miles Fisher görüntülerinin gerçek zamanlı olarak Tom Cruise’a dönüştürüldüğünü görüyoruz. Kaynak: https://martinanderson.substack.com/p/real-time-deepfake-streaming-is-apparently

Dün, her iki projenin lideri olan Rus geliştirici Ivan Petrov, yayınladı DeepFaceLive projesinin Discord grubunda yeni bir sürümünü, DeepFaceLive’in şimdi eğitilmiş bir Margot Robbie modelini içerdiğini belirterek.

Dört örnek video klip, DeepFaceLive’in herhangi bir konuşmacının webcam beslemesine Robbie kimliğini ekleyebilme yeteneğini göstermek için yüklenmiştir.

Canlı deepfaking için Margot Robbie gösterimi. Kaynak: https://github.com/iperov/DeepFaceLive/tree/master/doc/celebs/Margot_Robbie

Robbie dönüşüm videoları最初 olarak Twitch’de paylaşıldı, ancak daha sonra silindi.

DeepFaceLive tarafından sağlanan diğer üç yüz değiştirme örneği. Hedef konu ile yaklaşık yüz eşleşmesi gereksinimi hala mevcuttur. Alt sol resimde, yazılımın engelleri etkili bir şekilde maskelemeyi başaramadığını görüyoruz, çünkü bu, DeepFaceLab’in XSeg uygulamasında eğitim maskeleri gerektirir, bu da gerçek zamanlı sahtecilik için uygulanamaz.

Ek bir varsayılan model, İngiliz komedyen ve aktör Rowan Atkinson, yakın zamanda DeepFaceLive için kullanılabilir hale getirilecek.

Tom Cruise, 2021 Nisan ayında DeepFaceLive için entegre edilmiş bir kimlikti, ancak şimdi pakette varsayılan olarak kaldırılmış görünüyor. Ancak, model indirilebilir ve kurulabilir, ayrıca birçok diğer ünlünün eğitilmiş modelleri ve son kullanıcılar tarafından eğitilen özel modeller de mevcuttur.

DeepFaceLive yalnızca Windows 10 olarak çalışır ve rapor tarafından NVIDIA’ nın canlı yayın Broadcast uygulamasıyla iyi çalıştığı belirtilmiştir.

Kimlikleri Edinme

Kullanıcılar, bir veri seti için yüz materyali toplamak ve çok iyi bir eşleşme elde etmek için 3-10 gün gerekli olan zahmetli bir süreci geçmek zorunda değiller, çünkü DeepFaceLive’in SSS’si, önceden diğer yaratıcılar tarafından derlenen ‘hazır yüz modellerini’ kullanabileceğini belirtir. Aslında, bu tür modellerin en büyük kaynağı, mrdeepfakes porn sitesinin Forum-Eğitimli Modeller (arşiv bağlantısı) bölümüdür ve bir Rus son kullanıcı tarafından son bir YouTube videosunda kullanılmaktadır.

Vladislav Pedro, DeepFaceLive’i kullanarak kendini gerçek zamanlı olarak Tom Cruise’a dönüştürüyor. Videodaki model, mrdeepfakes’te barındırılıyor ve şimdiye kadar çevrimdışı deepfake işlemleri için kullanılmıştır. Kaynak: https://www.youtube.com/watch?v=0TcCKtObSnI

En iyi sonuçlar, son kullanıcının yüzünü hedef ünlüyü karşılaştırarak elde edilecektir, ancak simülasyonun kalitesi, son kullanıcının ünlüyü ne kadar andırmasına bağlı görünüyor. Son kullanıcı, ünlüyü oldukça iyi bir şekilde andırıyorsa, ikna edici bir sonuç elde edilebilir.

Yukarıdaki son üç Margot Robbie değişiminde görüldüğü gibi, yazılım, son kullanıcının yüzünün genel özelliklerinin radikal olarak farklı olduğu durumlarda mucizeler yaratamaz. Ancak, DeepFaceLab ayrıca tüm baş değişimlerini gerçekleştirebilir, bu da kaynak başını tamamen yazdırır, ancak saç stilleriyle ilgili sınırlamalar vardır. Discord sunucusundaki yorumlar, bunların DeepFaceLive’de de uygulanabileceğini doğrulamaktadır.

DeepFaceLive şu anda yalnızca NVIDIA GPU’larını desteklemektedir, GTX 750 en düşük donanım olarak makul bir sonuç elde edilebilir ve 4GB VRAM ile 32GB swap disk alanı gereklidir.

Margot Robbie modelinin eğitimi – DeepFaceLab/DeepFaceLive Discord’da Ivan Petrov tarafından yayınlanan bir görüntü. Burada, kaynak veri setinin非常iverse ve Avustralyalı aktrisin görüntüsünü çeşitli yüz tiplerine dönüştürebilecek güçlü ve iyi genellemiş bir model oluşturmak amacıyla kullanıldığını görüyoruz. ‘A’ setlerinin çoğu genellikle tek bir bireyden oluşur.

Kullanıcılar, DeepFaceLive’in donanım kaynakları açısından çok talepkar olduğunu bildirdiler, ancak Petrov buna karşılık, DeepFaceLive’in iyi donanımlı bilgisayarlar ve iç mekanlar için tasarlandığını belirtti.

DeepFaceLab GitHub’u 6.000’den fazla kez forklandı, yeni DeepFaceLive ise şu anda 85 fork sahiptir.

Mümkün Kullanımlar

Rus sosyal sitesi VK.com’daki bir tartışmada (Rusça) yorumcular, DeepFaceLive’in olası kullanımlarını tartışıyor gibi görünüyor ve muhtemelen yazılımın olası tüm uygulamalarını keşfetmiş gibi görünüyorlar: Zoom ve benzeri uygulamalar için bir ‘anonimleştirme’ veya eğlence filtresi olarak; canlı akışları izleyen kişiyi aldatmak veya kandırmak için bir araç olarak; ve belki de en olası – yazılımın kökeni ve kullanıcı tabanı dikkate alındığında – ünlü odaklı webcam tabanlı seks çalışması uygulamak için bir araç olarak (makale sonunda görüntüye bakın).

İki yıl önce ‘deepfake kamera kızları’ olasılığı medyada ortaya çıktı. 2020’de Avatarify uygulaması duyurdu ünlü webcam deepfake işlevselliğini, ancak DeepFaceLab tarafından belirlenen standarttan önemli ölçüde daha düşük bir kaliteyle.

DeepFaceLab, DeepFaceLive’in kaynak uygulaması ve son başlıkları yapan Tom Cruise deepfaker Chris Ume ve dünya çapındaki yüksek düzeyli film ve TV prodüksiyon şirketleri için réféンス depodur.

Deepfake Kısıtlamalarına Uyum

DeepFaceLab ve FaceSwap gibi deepfake yazılımlarının metodolojisi, tipik bir webcam ortamında iyi hizmet vermektedir ve çevrimdışı deepfakes’in masih karşılaşabileceği birçok otantiklik engelini ortadan kaldırmaktadır.

Örneğin, deepfakes, kullanıcı profil olarak döndüğünde (veya yukarı bakar), hızla hareket eder veya sahne değişiklikleri veya ani aydınlatma değişikliklerine maruz kalındığında daha az ikna edici bir şekilde çalışır.

Örneğin, birçok saygın deepfake hile örneği, konuşmacının doğrudan kameraya baktığı ve kısıtlanmış bir ortamda çok az hareket ettiği durumları içerir, Örneğin, Steve Buscemi’nin Jennifer Lawrence üzerine bindirilmesi Oscar konuşmasında ve çeşitli ‘kameraya’ siyasi yayınların dönüşümü.

DeepFaceLive’de varsayılan Margot Robbie modelinin en olası kullanımı – Rus kullanıcısı ‘NoFace’ tarafından DeepFaceLab Discord’da yayınlanan bir kamera uygulaması testi.

8 Ağustos 20:52’de düzeltilmiş – Soyadı düzeltilmiştir.
8 Ağustos 20:30’da düzeltilmiş – Discord’dan resimler eklendi.