زاوية Anderson

بث حي لاستخدام DeepFake مع DeepFaceLive

mm
أضف Unite.AI إلى مصادرك المفضلة على Google

أصبحت البرمجيات الأكثر استخدامًا لإنشاء deepfake، والتي ترتبط بشكل قوي مع deepfake الإباحي، تحصل على تنفيذ جديد – القدرة على وضع deepfakes من شبهة المشاهير في لقطات كاميرا ويب حية.

المستودع المفتوح DeepFaceLive هو تطبيق Windows 10 مبني على أساس DeepFaceLab، الذي أصبح بسرعة الموارد الرائدة لاستبدال الوجه القائم على الإباحية بعد أن تخلى مبتكر البرمجيات الأصلية عن المشروع بعد وقت قصير من ظهور ظاهرة deepfake التي خلقت ضجة عالمية في عام 2018. وتستخدم كلا المشروعين قسم المناقشة لموقع mrdeepfakes الإباحي كموارد دعم رسمية.

في فيديو لواجهة DeepFaceLive الصادرة عن المطور إيفان بيروف في أبريل، نرى لقطات تم تحميلها لشخص يتحول إلى توم كروز في الوقت الفعلي. مصدر: https://martinanderson.substack.com/p/real-time-deepfake-streaming-is-apparently

في فيديو لواجهة DeepFaceLive الصادرة عن المطور إيفان بيتروف في أبريل، نرى لقطات تم تحميلها لشخص يتحول إلى توم كروز في الوقت الفعلي. Source: https://martinanderson.substack.com/p/real-time-deepfake-streaming-is-apparently

أعلن المطور الروسي إيفان بيتروف، الذي يقود كلا المشروعين، عن إصدار جديد من DeepFaceLive على مجموعة ديسكورد الخاصة بالمشروع، مشيرًا إلى أن DeepFaceLive يدمج الآن نموذجًا مدربًا لممثلة مارغوت روبي، وهي موضوع شائع للفيديوهات الإباحية في mrdeepfakes.

تم تحميل أربعة مقاطع فيديو عينة لتحديد القدرة على ربط هوية روبي بأي متحدث في تغذية كاميرا ويب.

أحد عروض مارغوت روبي لاستخدام DeepFaceLive. مصدر: https://github.com/iperov/DeepFaceLive/tree/master/doc/celebs/Margot_Robbie

أحد عروض مارغوت روبي لاستخدام DeepFaceLive. Source: https://github.com/iperov/DeepFaceLive/tree/master/doc/celebs/Margot_Robbie

تم حذف مقاطع الفيديو الأصلية التي تم تحميلها على تويتش.

ثلاثة أمثلة أخرى لاستبدال الوجه الذي قدمته DeepFaceLive. لا يزال هناك حاجة إلى تطابق تقريبي للوجه مع موضوع الهدف. في الصورة السفلى اليسرى، نرى أن البرنامج لا يستطيع أن يخفي العوائق بشكل فعال، كما هو الحال في DeepFaceLab، لأن ذلك يتطلب تدريب أقنعة في تطبيق XSeg من DeepFaceLab، وهو أسلوب لا يمكن تطبيقه على التزييف في الوقت الفعلي.

ثلاثة أمثلة أخرى لاستبدال الوجه الذي قدمته DeepFaceLive. لا يزال هناك حاجة إلى تطابق تقريبي للوجه مع موضوع الهدف. في الصورة السفلى اليسرى، نرى أن البرنامج لا يستطيع أن يخفي العوائق بشكل فعال، كما هو الحال في DeepFaceLab، لأن ذلك يتطلب تدريب أقنعة في تطبيق XSeg من DeepFaceLab، وهو أسلوب لا يمكن تطبيقه على التزييف في الوقت الفعلي.

وعد بتوفير نموذج افتراضي إضافي لممثل كوميدي بريطاني، روان أتكنسون، قريباً. في البداية، كان مستودع DeepFaceLive يحتوي على فئة CELEB_MODEL، حيث كان من الممكن تحميل مشاهير آخرين، بما في ذلك توم كروز، كملفات Open Neural Network Exchange (.onnx)، ولكن هذه الدلائل تم حذفها منذ ذلك الحين.

كان توم كروز هوية متضمنة في DeepFaceLive في أبريل 2021، ولكنها قد تم حذفها الآن كخيار افتراضي في الحزمة.

كان توم كروز هوية متضمنة في إصدار بيتا من DeepFaceLive في أبريل 2021، ولكنها قد تم حذفها الآن كخيار افتراضي في الحزمة. ومع ذلك، يمكن تحميل النموذج وتثبيته، جنبًا إلى جنب مع نماذج مدربة من مشاهير آخرين، ونماذج مخصصة مدربة من قبل المستخدمين.

يتم تشغيل DeepFaceLive حصريًا كتطبيق Windows 10، ويُreported من قبل مستخدم أنه يعمل جيدًا مع تطبيق البث المباشر من NVIDIA ، Broadcast.

الحصول على الهويات

لا يحتاج المستخدمون إلى المرور بعملية شاقة لجمع مواد الوجه لبيانات تعليمية، متبوعة ب 3-10 أيام ضرورية للحصول على تطابق جيد جدًا، لأن سؤال وأجابة DeepFaceLive يذكر أن البرنامج يمكنه استخدام نماذج الوجه العامة التي تم تجميعها مسبقًا من قبل المبدعين الآخرين. في الواقع، أكبر مصدر لمثل هذه النماذج هو Thread Forum-Trained Models (الرابط المأرشح) في موقع mrdeepfakes الإباحي، والذي يمكن رؤيته في استخدام مستخدم نهاية روسي في فيديو يوتيوب حديث.

فладيسلاف بيدرو يستخدم DeepFaceLive لتحويل نفسه إلى توم كروز في الوقت الفعلي. النموذج الذي يقوم بتحميله في الفيديو يتم استضافته في mrdeepfakes، وقد تم استخدامه حتى الآن لمعالجة DeepFake离线. مصدر: https://www.youtube.com/watch?v=0TcCKtObSnI

فладيسلاف بيدرو يستخدم DeepFaceLive لتحويل نفسه إلى توم كروز في الوقت الفعلي. النموذج الذي يقوم بتحميله في الفيديو يتم استضافته في mrdeepfakes، وقد تم استخدامه حتى الآن لمعالجة DeepFake离线. Source: https://www.youtube.com/watch?v=0TcCKtObSnI

على الرغم من أن أفضل النتائج ستتم الحصول عليها من خلال تدريب وجه المستخدم على الوجه المشهور، يبدو أن جودة المحاكاة تتناسب بشكل مباشر مع مدى تشابه المستخدم مع المشهور. عندما يكون المستخدم متوافقًا جيدًا مع المشهور، يمكن الحصول على نتيجة مقنعة.

كما هو واضح في آخر ثلاثة تبادلات لمارغوت روبي في الصور أعلاه، لا يستطيع البرنامج أداء المعجزات عندما يكون وجه المستخدم له سمات عامة مختلفة جذريًا. ومع ذلك، يمكن لبرنامج DeepFaceLab أيضًا إجراء استبدال رأس كامل، وهو عملية تخفي الوجه المصدر تمامًا، على الرغم من وجود قيود فيما يتعلق بالتسريحات.

يؤكد التعليقات على خادم Discord أن هذه يمكن تنفيذها في DeepFaceLive.

يدعم DeepFaceLive حاليًا فقط وحدات معالجة الرسومات من NVIDIA، مع GTX 750 كأقل عتاد يمكن الحصول على نتيجة معقولة مع التطبيق. على بطاقة رسومات تحتوي على 4GB من VRAM، يتطلب أيضًا 32GB من مساحة قرص التبادل.

تدريب نموذج مارغوت روبي - صورة تم نشرها في Discord الخاص ب DeepFaceLab / DeepFaceLive بواسطة إيفان بيتروف

تدريب نموذج مارغوت روبي – صورة نشرت في Discord الخاص ب DeepFaceLab / DeepFaceLive بواسطة إيفان بيتروف. هنا نرى أن مجموعة البيانات المصدر هي متنوعة للغاية، على ما يبدو بهدف إنشاء نموذج قوي ومحسّن يمكنه تحويل أنواع واسعة من الوجوه إلى صورة الممثلة الأسترالية.

يبلغ المستخدمون أن DeepFaceLive يحتاج إلى موارد أجهزة عالية جدًا، ولكن بيتروف استجاب لذلك بالقول إن DeepFaceLive يُقصد به أجهزة الكمبيوتر المجهزة جيدًا في بيئة داخلية.

تم فورك مستودع DeepFaceLab على GitHub أكثر من 6000 مرة، بينما يحتوي DeepFaceLive الجديد حاليًا على 85 فورك.

الاستخدامات المحتملة

يتكهن المعلقون في الخيط (اللغة الروسية) على موقع VK.com الروسي بالاستخدامات المحتملة لبرنامج DeepFaceLive، ويبدو أنهم قد اكتشفوا جميع التطبيقات المحتملة للبرنامج: كمرشح أو ترفيه في تطبيقات مثل Zoom؛ كوسيلة للغش أو خداع الشخص الذي يشاهد البث المباشر؛ و – ربما الأكثر احتمالاً، في ضوء أصول البرنامج وقاعدة المستخدمين – كوسيلة لتنفيذ أعمال الجنس القائمة على المشاهير عبر الويب الكام (انظر الصورة في نهاية المقال).

برزت إمكانية “deepfake كام جيرلز” في وسائل الإعلام قبل بضع سنوات. في عام 2020، أعلن تطبيق Avatarify عن وظيفة الويب الكام لشبهة المشاهير، ولكن بجودة أقل بكثير من المعيار الذي وضعه DeepFaceLab، وهو الآن مستودع الخيار لعمليات deepfake التي جلبت عناوين رئيسية، مثل Chris Ume، بالإضافة إلى شركات الإنتاج السينمائية والتلفزيونية الكبيرة حول العالم.

DeepFaceLab، التطبيق الأصلي لبرنامج DeepFaceLive و الإطار المبلغ عنه (اللغة الروسية) ل 95٪ من جميع عمليات deepfake على YouTube، هو أيضًا البرنامج الذي يستخدمه Shamook، الذي قام بعمل استثنائي في تحسين ظهور لوك سكاي ووكر في مسلسل The Mandalorian، والذي ألهم مؤخرًا Lucasfilm لتوظيفه كاستشاري لتعزيز الفيديو.

التكيف مع قيود Deepfake

تخدم منهجية برامج Deepfake مثل DeepFaceLab و FaceSwap بيئة الويب الكام النموذجية، وتزيل العديد من العوائق التي يمكن أن تؤثر على الصحة في Deepfakes غير المباشرة.

على سبيل المثال، لا تؤدي Deepfakes بشكل مقنع عندما يلتفت المستخدم إلى الملف الشخصي (أو ينظر لأعلى)، أو يتحرك بسرعة، أو يخضع لتغييرات في المشهد أو تغييرات سريعة في الإضاءة.

لذلك، فإن الطبيعة “الساكنة” لمكالمة Zoom النموذجية أو كاميرا الويب تعزز من نقاط قوة البرنامج. العديد من الأمثلة الأكثر احترامًا لخداع Deepfake على مدار السنوات الثلاث الماضية قد ظهرت متحدثين يواجهون الكاميرا مباشرة ويتحركون قليلًا في بيئة محددة، مثل وضع ستيف بوسكيمي على جينيفر لورانس في خطاب أوسكار، وتحويل مختلف البث السياسي “إلى الكاميرا”.

الأكثر احتمالاً لاستخدام نموذج مارغوت روبي الافتراضي المضمن في DeepFaceLive - اختبار تنفيذ الكام، تم نشره على Discord الخاص ب DeepFaceLab بواسطة مستخدم روسي 'NoFace'.

الأكثر احتمالاً لاستخدام نموذج مارغوت روبي الافتراضي المضمن في DeepFaceLive – فيديو اختبار تنفيذ الكام نشر على Discord الخاص ب DeepFaceLab بواسطة مستخدم روسي ‘NoFace’.

 

تم تعديله في الساعة 8:52 مساءً في 7 أغسطس – تم تصحيح اسم العائلة.
تم تعديله في الساعة 8:30 مساءً في 8 أغسطس – تم إضافة صور من Discord.

كاتب في مجال التعلم الآلي، متخصص في مجال 合成 الصور البشرية. السابق رئيس محتوى البحث في Metaphysic.ai، حتى حلولها في Brahma.ai التابعة لشركة DNEG.
المنصة الشخصية: martinanderson.ai
التواصل: [email protected]