بث ديبفيك في الوقت الفعلي مع DeepFaceLive

يعتبر برنامج ديبفيك الأكثر استخدامًا في العالم، والذي يرتبط بشكل قوي مع ديبفيك البورنو، يحصل على تنفيذًا جديدًا – القدرة على وضع ديبفيك من شبه المشاهير في مقاطع فيديو كاميرا ويب مباشرة.

المستودع المفتوح DeepFaceLive هو تطبيق ويندوز 10 مبني على أساس DeepFaceLab، الذي أصبح بسرعة الموارد الرائدة لتبادل الوجهات القائمة على البورنو بعد أن تخلى مؤلف برنامج ديبفيك الأصلي عن المشروع بعد وقت قصير من ظهور ديبفيك الذي خلق ضجة عالمية في عام 2018. وتُظهر كلا المشروعين قائمة قسم المنتدى من موقع ديبفيك البورنو mrdeepfakes كمساعدة رسمية.

في مقطع فيديو لواجهة DeepFaceLive الصادرة عن المطور إيفان بيتروف في أبريل، نرى مقطع فيديو تم تحميله من الممثل ميلز فيشر يتم تحويله إلى توم كروز في الوقت الفعلي. مصدر: https://martinanderson.substack.com/p/real-time-deepfake-streaming-is-apparently

أعلن المطور الروسي إيفان بيتروف، الذي يقود كلا المشروعين، عن إصدار جديد من DeepFaceLive على مجموعة ديسكورد الخاصة بالمشروع، مشيرًا إلى أن DeepFaceLive يدمج الآن نموذجًا مدربًا للممثلة مارجوت روبي، وهو موضوع شائع في مقاطع الفيديو الإباحية في mrdeepfakes.

تم تحميل أربعة مقاطع فيديو عينة لتحديد القدرة على ربط هوية روبي بأي متحدث في تغذية كاميرا ويب.

إحدى عروض مارجوت روبي للتعديل في الوقت الفعلي. مصدر: https://github.com/iperov/DeepFaceLive/tree/master/doc/celebs/Margot_Robbie

تم حذف مقاطع الفيديو الأصلية التي تم تحميلها على تويتش.

ثلاثة أمثلة أخرى لتبادل الوجهات المقدمة من DeepFaceLive. لا يزال متطلب تقريب مطابقة الوجه مع الموضوع المستهدف ظاهرًا. في الصورة السفلى اليسرى، نرى أن البرنامج لا يمكنه التماسك الفعال مع العوائق، كما هو الحال في DeepFaceLab، لأن هذا يتطلب تدريب أقنعة في تطبيق XSeg من DeepFaceLab، وهو طريقة لا يمكن تطبيقها على التزييف في الوقت الفعلي.

يتم التأكيد على توفر نموذج افتراضي إضافي لروان أتكنسون قريباً. في الأصل، كان مستودع DeepFaceLive يحتوي على فئة CELEB_MODEL، حيث كان من الممكن تحميل مشاهير آخرين، بما في ذلك توم كروز، كملفات Open Neural Network Exchange (.onnx)، على الرغم من أن هذه الدلائل قد تم حذفها.

كان توم كروز هوية متضمنة في إصدار بيتا من DeepFaceLive في أبريل 2021، ولكن يبدو أنه تم إزالته كافتراضي في الحزمة. ومع ذلك، يمكن تحميل النموذج وتثبيته، جنبًا إلى جنب مع نماذج مدربة من مشاهير آخرين، ونماذج مخصصة مدربة من قبل المستخدمين النهائيين.

يعمل DeepFaceLive حصريًا كتطبيق ويندوز 10، ويُreported من قبل مستخدم واحد أنه يعمل جيدًا مع تطبيق بث NVIDIA Broadcast.

الحصول على الهويات

لا يحتاج المستخدمون إلى الخوض في عملية جمع مواد الوجه لمجموعة بيانات، متبوعة ب 3-10 أيام ضرورية للحصول على مطابقة جيدة جدًا، لأن سؤال وأجابة DeepFaceLive تنص على أنه يمكنه استخدام نماذج الوجه العامة التي تم تجميعها بالفعل من قبل المبدعين الآخرين. في الواقع، أكبر مصدر لهذه النماذج هو النماذج المدربة في المنتدى (الرابط المأرشش) في موقع البورنو mrdeepfakes، والتي يمكن رؤيتها في الاستخدام من قبل مستخدم نهاية روسي في فيديو يوتيوب حديث.

vladislav pedro يستخدم DeepFaceLive لتحويل نفسه إلى توم كروز في الوقت الفعلي. النموذج الذي يقوم بتحميله في الفيديو هو المضيف في mrdeepfakes، وقد تم استخدامه حتى الآن لمعالجة ديبفيك غير متصلة بالإنترنت. مصدر: https://www.youtube.com/watch?v=0TcCKtObSnI

على الرغم من أن أفضل النتائج ستتم الحصول عليها عن طريق تدريب وجه المستخدم النهائي على المشاهير المستهدف، يبدو أن جودة المحاكاة تكون متناسبة بشكل مباشر مع مدى تشابه المستخدم النهائي مع المشاهير. عندما يكون المستخدم متطابقًا جيدًا مع المشاهير، يمكن الحصول على نتيجة مقنعة.

كما هو واضح في آخر ثلاثة تبادلات مارجوت روبي في الصور أعلاه، لا يمكن للبرنامج إجراء معجزات عندما يكون وجه المستخدم النهائي له سمات عامة مختلفة جذريًا. ومع ذلك، يمكن لـ DeepFaceLab أيضًا إجراء تبادلات رأس كاملة، وهو عملية تكتب رأس المصدر بالكامل، على الرغم من وجود قيود فيما يتعلق بأسلوب الشعر. تؤكد التعليقات على خادم ديسكورد أن هذه يمكن تطبيقها أيضًا في DeepFaceLive.

يدعم DeepFaceLive حاليًا فقط وحدات معالجة الرسومات من NVIDIA، مع أن GTX 750 هو أقل الأجهزة التي يمكنها الحصول على نتيجة معقولة مع التطبيق. على بطاقة رسومات ذات 4GB من VRAM، يتطلب أيضًا 32GB من مساحة قرص التبادل.

تدريب نموذج مارجوت روبي – صورة نشرت في ديسكورد DeepFaceLab/DeepFaceLive بواسطة إيفان بيتروف. هنا نرى أن مجموعة البيانات المصدر هي متنوعة بشكل كبير، على ما يبدو بهدف إنشاء نموذج قوي ومعمم يمكنه تحويل مجموعة واسعة من أنواع الوجه إلى صورة الممثلة الأسترالية. عادة ما تكون معظم مجموعات “A” من فرد واحد فقط.

يُبلغ المستخدمون عن أن DeepFaceLive يحتاج إلى موارد أجهزة كبيرة، ولكن بيتروف رد على ذلك بالتأكيد على أن DeepFaceLive يُقصد به أجهزة الكمبيوتر المجهزة جيدًا في بيئة داخلية.

تم فورك مستودع DeepFaceLab أكثر من 6,000 مرة، بينما يحتوي DeepFaceLive الحالي على 85 فورك.

الاستخدامات المحتملة

يُشتبه المستخدمون في الخيط (اللغة الروسية) على موقع VK.com الروسي في الاستخدامات المحتملة لـ DeepFaceLive، ويبدو أنهم قد اكتشفوا جميع التطبيقات المحتملة للبرنامج: كمرشح لتجزئة أو ترفيه في تطبيقات مثل Zoom؛ كوسيلة لارتكاب الاحتيال أو خداع الشخص الذي يشاهد البث المباشر؛ و – ربما الأكثر احتمالاً، في ضوء أصول البرنامج وقاعدة المستخدمين – كوسيلة لتنفيذ أعمال الجنس القائمة على المشاهير عبر كاميرا الويب (انظر الصورة في نهاية المقالة).

ظهرت إمكانية “ديبفيك كام جيرلز” في وسائل الإعلام قبل بضع سنوات. في عام 2020، أعلن تطبيق Avatarify عن وظيفة ديبفيك المشاهير عبر كاميرا الويب، ولكن بجودة أقل بكثير من المعيار الذي حدده DeepFaceLab، وهو الآن مستودع الخيار لأحدث تيك توك ديبفيك توم كروز، وكذلك شركات الإنتاج السينمائية والتلفزيونية الرائدة في جميع أنحاء العالم.

DeepFaceLab، وهو التطبيق الأصلي لـ DeepFaceLive و الإطار المُبلغ عنه (اللغة الروسية) لـ 95٪ من جميع ديبفيك على يوتيوب،也是 البرنامج الذي يستخدمه Shamook، وهو ديبفيكر الذي ألهم عمله الاستثنائي على لوقاس فيلم لتجنيد لوك سكاي ووكر في المانдалوريان كمستشار للتحليلات البصرية.

معدل للقيود ديبفيك

تخدم منهجية برامج ديبفيك مثل DeepFaceLab و FaceSwap بشكل جيد بيئة الكاميرا الويب النموذجية، وتزيل العديد من العوائق التي يمكن أن تواجه الصحة في ديبفيك غير متصلة بالإنترنت.

على سبيل المثال، لا تؤدي ديبفيك بشكل مقنع عندما يلتفت المستخدم إلى الملف الشخصي (أو يرفع نظره)، أو يتحرك بسرعة، أو يخضع لتغييرات المشهد أو تغييرات سريعة في الإضاءة.

لذلك، فإن الطبيعة “الساكنة” لمكالمة زوم نموذجية أو كاميرا ويب تعزز نقاط قوة البرنامج. العديد من الأمثلة الأكثر احترامًا لخداع ديبفيك على مدار السنوات الثلاث الماضية تمت ممارستها من قبل المتحدثين الذين يواجهون الكاميرا مباشرة ويتحركون قليلاً في بيئة مقيدة، مثل وضع ستيف بوسكيمي على جينيفر لورانس في خطاب أوسكار، وتحويل البث السياسي “الوجه للكاميرا” المختلفة.

الأكثر احتمالاً لاستخدام نموذج مارجوت روبي الافتراضي في DeepFaceLive – فيديو اختبار الكام نشر على ديسكورد DeepFaceLab بواسطة المستخدم الروسي ‘NoFace’.

تم تعديله في 8:52 مساءً 7 أغسطس – تم تصحيح اسم العائلة.
تم تعديله في 8:30 مساءً 8 أغسطس – تم إضافة صور من ديسكورد.