रियल-टाइम डीपफ़ेक स्ट्रीमिंग के साथ डीपफ़ेसेलाइव

दुनिया का सबसे अधिक उपयोग किया जाने वाला डीपफ़ेक सॉफ़्टवेयर, और जो डीपफ़ेक पोर्न के साथ सबसे अधिक जुड़ा हुआ है, एक नई कार्यान्वयन प्राप्त कर रहा है – लाइव वेबकैम फुटेज में सेलिब्रिटी की समानता को सुपरइम्पोज़ करने की क्षमता।

ओपन सोर्स रिपॉजिटरी DeepFaceLive एक विंडोज 10 एप्लिकेशन है जो DeepFaceLab के आधार पर बनाया गया है, जो जल्द ही पोर्न-आधारित फेस-स्वैपिंग के लिए अग्रणी संसाधन बन गया जब संग्रह के निर्माता ने 2018 में डीपफ़ेकिंग द्वारा विश्वभर में विवाद पैदा करने के तुरंत बाद परियोजना को छोड़ दिया। दोनों परियोजनाएं सूची में डीपफ़ेक पोर्न साइट mrdeepfakes के फोरम अनुभाग को एक आधिकारिक समर्थन संसाधन के रूप में सूचीबद्ध करती हैं।

एक वीडियो में डीपफ़ेसेलाइव इंटरफ़ेस को अप्रैल में डेवलपर इवान पेट्रोव द्वारा जारी किया गया था, जिसमें हमें माइल्स फिशर को वास्तविक समय में टॉम क्रूज़ में बदलने के लिए डाउनलोड की गई फुटेज दिखाई दे रही है। स्रोत: https://martinanderson.substack.com/p/real-time-deepfake-streaming-is-apparently

कल दोनों परियोजनाओं के नेता, रूसी डेवलपर इवान पेट्रोव, घोषणा की कि डीपफ़ेसेलाइव का एक नया संस्करण परियोजना के डिस्कॉर्ड समूह में जारी किया गया है, जिसमें उल्लेख किया गया है कि डीपफ़ेसेलाइव में अब अभिनेत्री मार्गोट रॉबी का एक प्रशिक्षित मॉडल शामिल है, जो म्रडीपफ़ेक्स पर अश्लील वीडियो का एक सामान्य विषय है।

चार नमूना वीडियो क्लिप अपलोड किए गए हैं ताकि यह प्रदर्शित किया जा सके कि डीपफ़ेसेलाइव किसी भी वेबकैम फीड में रॉबी की पहचान को कैसे जोड़ सकता है।

लाइव डीपफ़ेकिंग के मार्गोट रॉबी प्रदर्शन में से एक। स्रोत: https://github.com/iperov/DeepFaceLive/tree/master/doc/celebs/Margot_Robbie

मार्गोट रॉबी ट्रांसफॉर्मेशन वीडियो मूल रूप से ट्विच पर साझा किए गए थे, लेकिन बाद में हटा दिए गए थे।

डीपफ़ेसेलाइव द्वारा प्रदान किए गए फेसस्वैपिंग के तीन अन्य उदाहरण। लक्ष्य विषय के साथ एक अनुमानित चेहरा मिलान की आवश्यकता अभी भी स्पष्ट है। नीचे बाएं छवि में हम देखते हैं कि सॉफ़्टवेयर रुकावटों को प्रभावी ढंग से मास्क नहीं कर सकता है, जैसा कि डीपफ़ेसेलैब में किया जा सकता है, क्योंकि यह डीपफ़ेसेलैब के एक्सएसएग एप्लिकेशन में मास्क को प्रशिक्षित करने की आवश्यकता होती है, जो वास्तविक समय के फेकिंग में लागू नहीं किया जा सकता है।

एक अतिरिक्त डिफ़ॉल्ट मॉडल, ब्रिटिश कॉमेडियन और अभिनेता रोवन एटकिंसन का, जल्द ही डीपफ़ेसेलाइव के लिए उपलब्ध कराया जाएगा। मूल रूप से, डीपफ़ेसेलाइव रिपॉजिटरी में सेलिब्रिटी मॉडल श्रेणी थी, जहां अन्य सेलिब्रिटी, टॉम क्रूज़ सहित, ओपन न्यूरल नेटवर्क एक्सचेंज (.onnx) फ़ाइलों के रूप में डाउनलोड किए जा सकते थे, हालांकि ये निर्देशिकाएं तब से हटा दी गई हैं।

टॉम क्रूज़ अप्रैल 2021 में डीपफ़ेसेलाइव के लिए एक एकीकृत पहचान थी, लेकिन अब पैकेज में डिफ़ॉल्ट रूप से हटा दी गई है। हालांकि, मॉडल डाउनलोड और इंस्टॉल किया जा सकता है, साथ ही साथ कई अन्य सेलिब्रिटी से प्रशिक्षित मॉडल और अंतिम उपयोगकर्ताओं द्वारा प्रशिक्षित मॉडल।

डीपफ़ेसेलाइव केवल विंडोज 10 एप्लिकेशन के रूप में चलता है, और एक उपयोगकर्ता द्वारा रिपोर्ट किया गया है कि यह एनवीडिया के लाइव स्ट्रीमिंग ब्रॉडकास्ट एप्लिकेशन के साथ अच्छा काम करता है।

पहचान प्राप्त करना

उपयोगकर्ताओं को डेटासेट के लिए चेहरे की सामग्री इकट्ठा करने की कठिन प्रक्रिया से गुजरने की आवश्यकता नहीं है, जिसके बाद 3-10 दिन लगते हैं एक बहुत अच्छा मिलान प्राप्त करने के लिए, क्योंकि डीपफ़ेसेलाइव के लिए एफएक्यू यह कहता है कि यह ऑफ-द-शेल्फ ‘सार्वजनिक चेहरे मॉडल’ का उपयोग कर सकता है जो अन्य रचनाकारों द्वारा पहले से ही संकलित किए गए हैं। वास्तव में, ऐसे मॉडल्स का सबसे बड़ा स्रोत म्रडीपफ़ेक्स पोर्न साइट पर फोरम-ट्रेन्ड मॉडल्स (आर्काइव लिंक) थ्रेड है, जिसे एक रूसी एंड-यूज़र द्वारा हाल के यूट्यूब वीडियो में उपयोग किया जा सकता है।

व्लादिस्लाव पेड्रो डीपफ़ेसेलाइव का उपयोग करके वास्तविक समय में टॉम क्रूज़ में बदलना। वीडियो में लोड किया गया मॉडल म्रडीपफ़ेक्स पर होस्ट किया गया है और अब तक ऑफ़लाइन डीपफ़ेक प्रोसेसिंग के लिए उपयोग किया गया है। स्रोत: https://www.youtube.com/watch?v=0TcCKtObSnI

हालांकि सबसे अच्छे परिणाम तब प्राप्त होंगे जब अंतिम उपयोगकर्ता का चेहरा लक्ष्य सेलिब्रिटी के खिलाफ प्रशिक्षित किया जाएगा, तो सिमुलेशन की गुणवत्ता सीधे तौर पर इस बात से संबंधित लगती है कि अंतिम उपयोगकर्ता लक्ष्य सेलिब्रिटी के साथ कितनी अच्छी तरह से फिट बैठता है। जब उपयोगकर्ता सेलिब्रिटी के साथ अपेक्षाकृत अच्छी तरह से फिट होता है, तो एक आश्वस्त परिणाम प्राप्त किया जा सकता है।

जैसा कि ऊपर दी गई मार्गोट रॉबी स्वैप की आखिरी तीन छवियों में स्पष्ट है, सॉफ़्टवेयर तब चमत्कार नहीं कर सकता जब अंतिम उपयोगकर्ता का चेहरा सामान्य विशेषताओं में लक्ष्य से काफी अलग होता है। हालांकि, डीपफ़ेसेलैब भी पूरे सिर को स्वैप कर सकता है, जो स्रोत सिर को पूरी तरह से ओवरराइट करता है, हालांकि बालों के संबंध में सीमाएं हैं। डिस्कॉर्ड सर्वर पर टिप्पणियां यह पुष्टि करती हैं कि वे डीपफ़ेसेलाइव में भी लागू किए जा सकते हैं।

वर्तमान में डीपफ़ेसेलाइव केवल एनवीडिया जीपीयू को सपोर्ट करता है, जिसमें जीटीएक्स 750 सबसे कम हार्डवेयर है जो एप्लिकेशन के साथ एक उचित परिणाम प्राप्त कर सकता है। 4GB के वीआरएएम वाले एक ग्राफिक्स कार्ड पर, यह 32GB के स्वैप डिस्क स्पेस की भी आवश्यकता होती है।

मार्गोट रॉबी मॉडल को प्रशिक्षित करना – डीपफ़ेसेलैब/डीपफ़ेसेलाइव डिस्कॉर्ड पर पोस्ट की गई इवान पेट्रोव की छवि। यहां हम देखते हैं कि स्रोत डेटासेट बहुत विविध है, जाहिर तौर पर एक मजबूत और अच्छी तरह से सामान्यीकृत मॉडल बनाने के इरादे से जो विभिन्न प्रकार के चेहरों को ऑस्ट्रेलियाई अभिनेत्री की छवि में बदल सकता है। अधिकांश ‘ए’ सेट आमतौर पर एक ही व्यक्ति के होते हैं।

उपयोगकर्ता बताते हैं कि डीपफ़ेसेलाइव हार्डवेयर संसाधनों के संदर्भ में बहुत मांग वाला है, लेकिन पेट्रोव ने इसका जवाब दिया है कि डीपफ़ेसेलाइव को अच्छी तरह से स्पेक्ड पीसी के लिए डिज़ाइन किया गया है जो एक इनडोर वातावरण में है।

डीपफ़ेसेलैब गिटहब को 6,000 से अधिक बार फोर्क किया गया है, जबकि नया डीपफ़ेसेलाइव वर्तमान में 85 फोर्क है।

संभावित उपयोग

रूसी सोशल साइट वीके.कॉम पर एक थ्रेड (रूसी भाषा) में टिप्पणीकार डीपफ़ेसेलाइव के संभावित उपयोगों पर विचार करते हैं, और लगता है कि उन्होंने सॉफ़्टवेयर के लिए सभी संभावित अनुप्रयोगों का पता लगा लिया है: ज़ूम और समान अनुप्रयोगों में एक ‘अनामीकरण’ या मनोरंजक फिल्टर के रूप में; एक लाइव स्ट्रीम को देखने वाले व्यक्ति को धोखा देने या धोखा देने के साधन के रूप में; और – शायद सबसे अधिक संभावना है, सॉफ़्टवेयर की उत्पत्ति और उपयोगकर्ता आधार को देखते हुए – सेलिब्रिटी केंद्रित वेबकैम-आधारित सेक्स कार्य को लागू करने के साधन के रूप में (लेख के अंत में छवि देखें)।

डीपफ़ेक कैम गर्ल्स की संभावना मीडिया में कुछ साल पहले उत्पन्न हुई थी। 2020 में अवतारिफाई ऐप घोषणा की कि डीपफ़ेक सेलिब्रिटी वेबकैम कार्यक्षमता है, लेकिन डीपफ़ेसेलैब द्वारा निर्धारित मानक से काफी कम गुणवत्ता वाली है। डीपफ़ेसेलैब अब चयन का भंडार है हाल के हेडलाइन टॉम क्रूज़ डीपफ़ेकर क्रिस उमे के लिए, साथ ही दुनिया भर में फिल्म और टीवी उत्पादन कंपनियों के लिए।

डीपफ़ेसेलैब, डीपफ़ेसेलाइव के लिए मूल एप्लिकेशन और रिपोर्ट (रूसी भाषा) के लिए फ्रेमवर्क है 95% यूट्यूब पर सभी डीपफ़ेक्स के लिए, यह सॉफ़्टवेयर है जिसका उपयोग शमूक, डीपफ़ेकेर द्वारा किया जाता है, जिसका असाधारण काम ल्यूक स्काईवॉकर की मैनडलोरियन में अतिथि उपस्थिति में सुधार करने के लिए हाल ही में लुकासफिल्म को किराए पर लेने के लिए प्रेरित किया है। एक वीएफएक्स सलाहकार के रूप में।

डीपफ़ेक सीमाओं के अनुकूल

डीपफ़ेसेलैब और फेसस्वैप जैसे डीपफ़ेक सॉफ़्टवेयर की विधि एक विशिष्ट वेबकैम वातावरण से अच्छी तरह से सेवा प्राप्त करती है, और प्रामाणिकता के लिए ऑफ़लाइन डीपफ़ेक्स को अभी भी प्रभावित करने वाली कई बाधाओं को हटा देती है।

उदाहरण के लिए, डीपफ़ेक्स तब कम आश्वस्त रूप से प्रदर्शन करते हैं जब उपयोगकर्ता प्रोफ़ाइल (या ऊपर देखता है), तेजी से चलता है, या दृश्य परिवर्तन या तेजी से प्रकाश परिवर्तन के अधीन है।

इसलिए, एक विशिष्ट ज़ूम कॉल की ‘स्थिर’ प्रकृति सॉफ़्टवेयर की ताकत के लिए खेलती है। पिछले तीन वर्षों में डीपफ़ेक चाल के सबसे प्रतिष्ठित उदाहरणों में से कई में स्पीकर को सीधे कैमरे का सामना करना और एक सीमित वातावरण में बहुत कम हिलाना शामिल था, जैसे कि स्टीव बुस्केमी को जेनिफर लॉरेंस पर ऑस्कर भाषण में, और विभिन्न ‘टू कैमरा’ राजनीतिक प्रसारणों में परिवर्तन।

डीपफ़ेसेलाइव में शामिल डिफ़ॉल्ट मार्गोट रॉबी मॉडल का सबसे संभावित उपयोग – एक कैम इम्प्लीमेंटेशन टेस्ट वीडियो जिसे डीपफ़ेसेलैब डिस्कॉर्ड पर प्रकाशित किया गया था।

संशोधित 8:52pm 7वीं अगस्त – उपनाम सुधारा।
संशोधित 8:30pm 8वीं अगस्त – डिस्कॉर्ड से छवियां जोड़ीं।