בקר האנושואיד המסוכף של Intel: גישה חדשנית ליצירת תנועה אנושית פיזית וישירה

חוקרים מ- Intel Labs, בשיתוף פעולה עם מומחים אקדמיים ותעשייתיים, הציגו טכניקה מהפכנית ליצירת תנועה אנושית ריאליסטית וישירה מקלטות רב-מודאליות דלילות. עבודתם, שהוצגה ב- ועידת אירופה לראייה ממוחשבת (ECCV 2024), מתמקדת בהתגברות על אתגרים ביצירת התנהגויות אנושיות טבעיות ופיזיקליות בדמויות אנושואיד בממד גבוה. מחקר זה הוא חלק מיוזמה רחבה יותר של Intel Labs לקדם ראייה ממוחשבת ולמידת מכונה.

Intel Labs ושותפיה הציגו לאחרונה שישה מאמרים חדשניים ב- ECCV 2024, ועידה בכירה המאורגנת על ידי האגודה האירופית לראייה ממוחשבת (ECVA).

המאמר יצירת תנועות אנושיות פיזית וישירות מקלטות רב-מודאליות הציג חידושים כולל אסטרטגיית הגנה חדשה להגנת מודלים טקסט-ל-תמונה מתקפות צוות אדום מבוססות פרומפט ופיתוח מאגר נתונים בקנה מידה גדול לשיפור העקביות המרחבית במודלים אלה. בין התרומות האלה, המאמר מדגיש את התחייבותה של Intel לקידום מודלים גנרטיביים בעודו מעדיף אינטליגנציה מלאכותית אחראית.

יצירת תנועות אנושיות ריאליסטיות באמצעות קלטות רב-מודאליות

בקר האנושואיד המסוכף (MHC) של Intel הוא מערכת פורצת דרך שתוכננה ליצירת תנועה אנושית-דמוית בסביבות פיזיקה מדומות. לא כמו שיטות מסורתיות המסתמכות בעיקר על נתוני לכידת תנועה מפורטים לחלוטין, MHC תוכנן לטפל בנתוני קלט דלילים, חסרים או חלקיים ממקורות שונים. מקורות אלה יכולים לכלול בקרי VR, שעשויים לעקוב רק אחר תנועות יד או ראש; פקודות ניווט ברמה גבוהה ממשק ג’ויסטיק; עקיבת וידאו, שבה חלקי גוף מסוימים עלולים להיות מוסתרים; או אפילו הוראות מופשטות שנגזרות מפרומפטים טקסטואליים.

החידוש של הטכנולוגיה טמון ביכולתה לפרש ולמלא פערים שבהם הנתונים חסרים או לא שלמים. היא משיגה זאת דרך מה ש-Intel מכנה תפיסה, שילוב והשלמה (CCC):

• תפיסה: תכונה זו מאפשרת ל-MHC לשחזר ולסנכרן מחדש את תנועתו כאשר הפרעות מתרחשות, כגון כאשר המערכת מתחילה במצב כושל, כגון דמות אנושואיד שנפלה. המערכת יכולה במהירות לתקן את תנועותיה ולחדש תנועה טבעית ללא אימון מחדש או התאמות ידניות.
• שילוב: MHC יכול לשלב רצפי תנועה שונים, כגון מיזוג תנועות גוף עליון מפעולה אחת (למשל, גלים) עם תנועות גוף תחתון מפעולה אחרת (למשל, הליכה). גמישות זו מאפשרת יצירת התנהגויות חדשות לחלוטין מנתוני תנועה קיימים.
• השלמה: כאשר ניתנים קלטות דלילות, כגון נתוני תנועה חלקיים או הוראות ברמה גבוהה מעורפלות, MHC יכול להסיק וליצור באופן מבטיח את החלקים החסרים של התנועה. לדוגמה, אם רק תנועות זרוע מפורטות, MHC יכול לייצר באופן אוטונומי תנועות רגליים תואמות כדי לשמור על איזון פיזי וריאליזם.

התוצאה היא מערכת יצירת תנועה מאוד מותאמת שיכולה ליצור תנועות חלקות, ריאליסטיות ופיזיקלית מדויקות, אפילו עם הנחיות לא מוגדרות או חסרות. זה הופך את MHC לאידיאלי ליישומים במשחקים, רובוטיקה, מציאות וירטואלית וכל סיטואציה שבה נדרשת תנועה אנושית-דמוית איכותית גבוהה אך נתוני הקלט מוגבלים.

ההשפעה של MHC על מודלים גנרטיביים של תנועה

בקר האנושואיד המסוכף (MHC) הוא חלק ממאמץ רחב יותר של Intel Labs ושותפיה לבנות מודלים גנרטיביים באופן אחראי, כולל אלה המניעים משימות יצירת 3D. כפי שדנו ב- ECCV 2024, גישה זו היא בעלת משמעות משמעותית לתעשיות כגון רובוטיקה, מציאות וירטואלית, משחקים וסימולציה, שם יצירת תנועה אנושית ריאליסטית היא קריטית. על ידי שילוב קלטות רב-מודאליות ואפשרות לבקר לעבור באופן חסר רף בין תנועות, MHC יכול לטפל בתנאים אמיתיים שבהם נתוני חיישן עלולים להיות רועשים או לא שלמים.

עבודה זו של Intel Labs עומדת לצד מחקר מתקדם אחר שהוצג ב- ECCV 2024, כגון הגנה חדשנית למודלים טקסט-ל-תמונה ופיתוח טכניקות לשיפור העקביות המרחבית ביצירת תמונות. יחד, התקדמויות אלה מדגימות את ההובלה של Intel בתחום הראייה הממוחשבת, עם דגש על פיתוח טכנולוגיות אינטליגנציה מלאכותית בטוחות, מקורבות ואחראיות.

מסקנה

בקר האנושואיד המסוכף (MHC), שפותח על ידי Intel Labs ושותפים אקדמיים, מייצג צעד קריטי קדימה בתחום יצירת תנועה אנושית. על ידי טיפול בבעיה המורכבת של יצירת תנועות ריאליסטיות מקלטות רב-מודאליות, MHC פותח את הדרך ליישומים חדשים ב-VR, משחקים, רובוטיקה וסימולציה. מחקר זה, שהוצג ב- ECCV 2024, מדגים את התחייבותה של Intel לקידום אינטליגנציה מלאכותית אחראית ומודלים גנרטיביים, תורם לטכנולוגיות בטוחות ומותאמות יותר בתחומים שונים.