Kecerdasan buatan
Streaming DeepFake Waktu Nyata Dengan DeepFaceLive
Perangkat lunak deepfake yang paling banyak digunakan di dunia, dan yang paling kuat dikaitkan dengan pornografi deepfake, mendapatkan implementasi baru – kemampuan untuk menumpangkan deepfake dari kemiripan selebritas ke dalam rekaman webcam langsung. Repositori sumber terbuka DeepFaceLive adalah aplikasi Windows 10 yang dibangun di atas fondasi DeepFaceLab, yang dengan cepat menjadi sumber daya utama untuk pertukaran wajah berbasis pornografi setelah pembuat perangkat lunak deepfake asli meninggalkan proyek tak lama setelah kemunculan deepfake menciptakan kontroversi di seluruh dunia pada 2018. Kedua proyek mencantumkan bagian forum dari situs pornografi deepfake mrdeepfakes sebagai sumber dukungan resmi.
Dalam video antarmuka DeepFaceLive yang dirilis oleh pengembang Ivan Petrov pada April, kita melihat rekaman yang diunduh dari peniru Miles Fisher yang diubah menjadi Tom Cruise secara waktu nyata. Sumber: https://martinanderson.substack.com/p/real-time-deepfake-streaming-is-apparently
Kemarin pimpinan kedua proyek, pengembang Rusia Ivan Petrov, mengumumkan versi baru DeepFaceLive di grup Discord proyek, mencatat bahwa DeepFaceLive kini menggabungkan model terlatih dari aktris Margot Robbie, subjek yang sering muncul di video porno di mrdeepfakes. Empat klip video sampel telah diunggah untuk mendemonstrasikan kemampuan DeepFaceLive untuk menempelkan identitas Robbie ke pembicara mana pun dalam umpan webcam.
Salah satu demonstrasi deepfake langsung Margot Robbie. Sumber: https://github.com/iperov/DeepFaceLive/tree/master/doc/celebs/Margot_Robbie
Video transformasi Robbie awalnya dibagikan di Twitch, tetapi kemudian dihapus.
Tiga contoh lain pertukaran wajah yang disediakan oleh DeepFaceLive. Persyaratan untuk kecocokan wajah yang mendekati dengan subjek target masih terlihat. Di gambar kiri bawah kita melihat bahwa perangkat lunak tidak dapat secara efektif menutupi halangan, seperti yang dapat dicapai di DeepFaceLab, karena ini memerlukan pelatihan masker di aplikasi XSeg dari DeepFaceLab, sebuah metode yang tidak dapat diterapkan pada pemalsuan waktu nyata.
Model default tambahan, dari komedian dan aktor Inggris Rowan Atkinson, dijanjikan akan segera tersedia untuk DeepFaceLive. Awalnya repositori DeepFaceLive menampilkan kategori CELEB_MODEL, di mana dimungkinkan untuk mengunduh selebritas lain, termasuk Tom Cruise, sebagai file Open Neural Network Exchange (.onnx), meskipun direktori ini sejak itu telah dihapus.
Tom Cruise adalah identitas yang tergabung untuk beta DeepFaceLive kembali pada April 2021, tetapi sejak itu tampaknya telah dihapus sebagai default dalam paket. Namun, model dapat diunduh dan diinstal, bersama dengan model terlatih dari banyak selebritas lain, dan model kustom yang dilatih oleh pengguna akhir.
DeepFaceLive berjalan secara eksklusif sebagai aplikasi Windows 10, dan dilaporkan oleh satu pengguna bekerja dengan baik dengan aplikasi streaming langsung Broadcast NVIDIA.
Memperoleh Identitas
Pengguna tidak perlu melalui proses yang melelahkan untuk mengumpulkan materi wajah untuk dataset, diikuti dengan 3-10 hari yang diperlukan untuk mendapatkan kecocokan yang sangat baik, karena FAQ untuk DeepFaceLive menyatakan bahwa ia dapat menggunakan ‘model wajah publik’ siap pakai yang telah dikompilasi oleh pembuat lain. Pada dasarnya, sumber terbesar model semacam itu adalah utas Forum-Trained Models (tautan arsip) di situs porno mrdeepfakes, yang dapat dilihat digunakan oleh satu pengguna akhir Rusia dalam video YouTube baru-baru ini.
Vladislav Pedro menggunakan DeepFaceLive untuk mengubah dirinya menjadi Tom Cruise secara waktu nyata. Model yang dia muat dalam video dihosting di mrdeepfakes, dan telah digunakan hingga sekarang untuk pemrosesan deepfake offline. Sumber: Meskipun hasil terbaik akan diperoleh dengan melatih wajah pengguna akhir terhadap selebritas target, kualitas simulasi tampaknya berbanding lurus dengan seberapa dekat pengguna akhir menyerupai target. Ketika pengguna relatif cocok dengan selebritas, hasil yang meyakinkan dapat diperoleh. Seperti yang terlihat dalam tiga pertukaran Margot Robbie terakhir pada gambar di atas, perangkat lunak tidak dapat melakukan keajaiban di mana wajah pengguna akhir memiliki karakteristik umum yang sangat berbeda. Namun, DeepFaceLab juga dapat melakukan pertukaran seluruh kepala, sebuah proses yang sepenuhnya menimpa kepala sumber, meskipun dengan keterbatasan terkait gaya rambut. Komentar di server Discord mengonfirmasi bahwa ini juga dapat diimplementasikan di DeepFaceLive. DeepFaceLive saat ini hanya mendukung GPU NVIDIA, dengan GTX 750 sebagai perangkat keras terendah yang dapat memperoleh hasil yang wajar dengan aplikasi. Pada kartu grafis dengan 4GB VRAM, ia juga memerlukan 32GB ruang disk swap. [caption id="attachment_177077" align="alignnone" width="814"]
Pengguna melaporkan bahwa DeepFaceLive sangat menuntut dalam hal sumber daya perangkat keras, tetapi Petrov telah menanggapi ini dengan menegaskan bahwa DeepFaceLive dimaksudkan untuk PC dengan spesifikasi baik di lingkungan dalam ruangan. GitHub DeepFaceLab telah difork lebih dari 6.000 kali, sementara DeepFaceLive yang baru saat ini memiliki 85 fork.
Kemungkinan Penggunaan
Komentator dalam sebuah utas (bahasa Rusia) di situs sosial Rusia VK.com berspekulasi tentang kemungkinan penggunaan DeepFaceLive, dan tampaknya telah menyadari semua aplikasi yang mungkin untuk perangkat lunak ini: sebagai filter ‘anonimisasi’ atau rekreasi di Zoom dan aplikasi serupa; sebagai sarana untuk melakukan penipuan atau menipu orang yang menonton streaming langsung; dan – mungkin yang paling mungkin, mengingat asal-usul dan basis pengguna perangkat lunak – sebagai sarana untuk mengimplementasikan pekerjaan seks berbasis webcam yang berfokus pada selebritas (lihat gambar di akhir artikel). Kemungkinan ‘cam girl deepfake’ muncul di media beberapa tahun lalu. Pada 2020 aplikasi Avatarify mengumumkan fungsionalitas webcam selebritas deepfake, tetapi dengan kualitas yang secara signifikan lebih rendah daripada standar yang ditetapkan oleh DeepFaceLab, yang sekarang menjadi repositori pilihan untuk pembuat deepfake Tom Cruise penarik perhatian baru-baru ini Chris Ume, serta perusahaan produksi film dan TV tingkat tinggi di seluruh dunia. DeepFaceLab, aplikasi benih untuk DeepFaceLive dan kerangka kerja yang dilaporkan (bahasa Rusia) untuk 95% dari semua deepfake di YouTube, juga merupakan perangkat lunak yang digunakan oleh Shamook, pembuat deepfake yang karya luar biasanya dalam meningkatkan penampilan tamu Luke Skywalker di The Mandalorian baru-baru ini menginspirasi Lucasfilm untuk mempekerjakannya sebagai konsultan VFX.
Diadaptasi Untuk Keterbatasan Deepfake
Metodologi perangkat lunak deepfake seperti DeepFaceLab dan FaceSwap sangat cocok dengan lingkungan webcam yang khas, dan menghilangkan banyak hambatan terhadap keaslian yang masih dapat mengganggu deepfake offline. Misalnya, deepfake tampak kurang meyakinkan ketika pengguna menoleh ke samping (atau melihat ke atas), bergerak cepat, atau mengalami perubahan adegan atau perubahan pencahayaan yang tiba-tiba. Oleh karena itu, sifat ‘statis’ dari panggilan Zoom atau webcam yang khas sesuai dengan kekuatan perangkat lunak. Banyak contoh tipuan deepfake yang paling dihormati selama tiga tahun terakhir menampilkan pembicara yang menghadap kamera secara langsung dan bergerak sangat sedikit di lingkungan yang terbatas, seperti penempatan Steve Buscemi ke Jennifer Lawrence di pidato Oscar, dan transformasi berbagai siaran politik ‘ke kamera’.
Bisa dibilang penggunaan yang paling mungkin dari model default Margot Robbie yang termasuk dalam DeepFaceLive – video uji implementasi cam yang diterbitkan di Discord DeepFaceLab oleh pengguna Rusia ‘NoFace’.
Diubah 8:52 malam 7 Agustus – Memperbaiki nama belakang. Diubah 8:30 malam 8 Agustus – menambahkan gambar dari Discord.
