تحريك العين المحاكى يساعد في تدريب ميتافيرس

قام مهندسو الحاسوب في جامعة ديوك بتطوير عيون افتراضية يمكنها محاكاة كيفية نظر البشر للعالم. العيون الافتراضية دقيقة لدرجة أن يمكن استخدامها لتدريب برامج الواقع الافتراضي والواقع المعزز. ستكون مفيدة بشكل لا يصدق للمطورين الذين يبحثون عن إنشاء تطبيقات في ميتافيرس.

سيتم عرض النتائج في 4-6 مايو في مؤتمر معالجة المعلومات في شبكات الحساء (PSN).

تسمى العيون الافتراضية الجديدة EyeSyn.

تدريب الخوارزميات للعمل مثل العيون

ماريا جورلاتوفا هي أستاذ مساعد في الهندسة الكهربائية والحاسوب في جامعة ديوك.

“إذا كنت مهتمًا بالكشف عن ما إذا كان شخص ما يقرأ كتابًا مصورًا أو أدبًا متقدمًا من خلال النظر إلى عينيه فقط، يمكنك القيام بذلك،” قال جورلاتوفا.

“لكن تدريب هذا النوع من الخوارزمية يتطلب بيانات من مئات الأشخاص الذين يرتدون أجهزة الرأس لعدة ساعات في المرة الواحدة،” واصلت جورلاتوفا. “كنا نريد تطوير برنامج يقلل من مخاوف الخصوصية التي تأتي مع جمع هذه البيانات، ويعمل أيضًا على تمكين الشركات الصغيرة التي لا تملك هذه المستويات من الموارد من دخول لعبة ميتافيرس.”

العيون البشرية قادرة على القيام بالعديد من الأشياء، مثل الإشارة إلى ما إذا كنا متعبين أو متحمسين، أو مكان التركيز، أو إذا كنا خبيرين في مهمة معينة.

“أين تضع عينيك يخبرنا الكثير عنك كشخص،” قال جورلاتوفا. “يمكن أن يفصح عن تحيزات جنسية وعرقية، ومصالح لا نريد أن يعرفها الآخرون، ومعلومات لا نعرفها حتى عن أنفسنا.”

بيانات حركة العين مفيدة بشكل كبير للشركات التي تبني منصات وبرامج في ميتافيرس. يمكن أن تمكن المطورين من تخصيص المحتوى لاستجابات الارتباط أو تقليل الدقة في رؤية المحيط، مما يمكن أن يوفر طاقة حسابية.

فريق من علماء الحاسوب، والذي شمل زميلًا سابقًا دراسيًا غوهاو لان وطالب دكتوراه حالي تيم سكارغيل، سعى إلى تطوير العيون الافتراضية لمحاكاة كيفية استجابة الإنسان العادي لمختلف المحفزات الصوتية. لفعل ذلك، نظروا إلى أدب العلوم المعرفية الذي يبحث في كيفية رؤية البشر للعالم ومعالجة المعلومات الافتراضية.

لان هو الآن أستاذ مساعد في جامعة ديلفت للتكنولوجيا في هولندا.

“إذا قدمت EyeSyn الكثير من المدخلات و चलته đủ مرات، سوف تنشئ مجموعة بيانات من حركات العين الاصطناعية التي تكفي لتدريب مصنف (تعلم الآلة) لبرنامج جديد،” قال جورلاتوفا.

اختبار النظام

قامت الباحثون باختبار دقة العيون الاصطناعية باستخدام بيانات متاحة للجمهور. تم وضع العيون أولاً لتحليل مقاطع فيديو للدكتور أنتوني فاوتشي وهو يخاطب وسائل الإعلام خلال المؤتمرات الصحفية. ثم قارن الفريق بينه وبين بيانات من حركات العين الفعلية للمشاهدين. كما قارنوا مجموعة بيانات افتراضية من العيون الاصطناعية التي تنظر إلى الفن مع مجموعات بيانات فعلية تم جمعها من أشخاص ينظرون إلى متحف فني افتراضي. أظهرت النتائج أن EyeSyn يمكن أن تتوافق بشكل وثيق مع أنماط الإشارات الغازية الفعلية ومحاكاة طرق مختلفة لاستجابة عيون الناس.

تقول جورلاتوفا أن هذه النتائج تشير إلى أن العيون الافتراضية جيدة بما يكفي لاستخدامها من قبل الشركات كقاعدة لتدريب منصات وبرامج ميتافيرس جديدة.

“البيانات الاصطناعية وحدها ليست مثالية، لكنها نقطة بداية جيدة،” قال جورلاتوفا. “الشركات الصغيرة يمكنها استخدامها بدلاً من إنفاق الوقت والمال في محاولة بناء مجموعات بيانات العالم الحقيقي (مع موضوعات بشرية). وبما أن تخصيص الخوارزميات يمكن أن يتم على الأنظمة المحلية، لا يحتاج الناس إلى القلق بشأن تحول بيانات حركة عينهم الخاصة إلى جزء من قاعدة بيانات كبيرة.”