การเคลื่อนไหวของดวงตาที่จำลองช่วยฝึกอบรม Metaverse

วิศวกรคอมพิวเตอร์จากมหาวิทยาลัย Duke ได้พัฒนาดวงตาที่จำลองขึ้นมาเพื่อจำลองวิธีที่มนุษย์มองโลก ดวงตาที่จำลองนี้มีความแม่นยำมากจนสามารถใช้ในการฝึกอบรมโปรแกรมความเป็นจริงเสมือนและความเป็นจริงเสริมได้ จะเป็นประโยชน์อย่างมากต่อนักพัฒนาที่ต้องการสร้างแอปพลิเคชันใน Metaverse

ผลการวิจัยจะถูกนำเสนอในวันที่ 4-6 พฤษภาคมที่การประชุมสัมมนาระดับนานาชาติเกี่ยวกับการประมวลผลข้อมูลในเครือข่ายเซ็นเซอร์ (PSN)

ดวงตาที่จำลองใหม่นี้เรียกว่า EyeSyn

การฝึกอบรมอัลกอริทึมให้ทำงานเหมือนดวงตา

Maria Gorlatova เป็นรองศาสตราจารย์ด้านวิศวกรรมไฟฟ้าและคอมพิวเตอร์ที่ Duke

“หากคุณสนใจที่จะตรวจจับว่าบุคคลนั้นกำลังอ่านหนังสือการ์ตูนหรือวรรณกรรมขั้นสูงโดยดูที่ดวงตาของพวกเขาเพียงอย่างเดียว คุณสามารถทำได้” Gorlatova กล่าว

“แต่การฝึกอบรมอัลกอริทึมประเภทนั้นต้องการข้อมูลจากหลายร้อยคนสวมหูฟังเป็นเวลาหลายชั่วโมง” Gorlatova กล่าวต่อ “เราต้องการพัฒนาซอฟต์แวร์ที่ไม่เพียงแต่ลดความกังวลเกี่ยวกับความเป็นส่วนตัวที่เกี่ยวข้องกับการรวบรวมข้อมูลประเภทนี้ แต่ยังช่วยให้公司ขนาดเล็กที่ไม่มีทรัพยากรในระดับเดียวกันสามารถเข้าสู่เกม Metaverse ได้”

ดวงตาของมนุษย์สามารถทำหลายสิ่งได้ เช่น บ่งบอกว่าเรารู้สึกเบื่อหรือตื่นเต้น มุ่งเน้นไปที่ไหน หรือว่าเราคือผู้เชี่ยวชาญในงานใดงานหนึ่ง

“ที่คุณให้ความสำคัญกับการมองเห็นของคุณบอกเป็นนัยหลายอย่างเกี่ยวกับคุณ” Gorlatova กล่าว “มันสามารถเปิดเผยความลำเอียงทางเพศและเชื้อชาติ ความสนใจที่เราไม่ต้องการให้คนอื่นรู้ และข้อมูลที่เราไม่เคยรู้เกี่ยวกับตัวเอง”

ข้อมูลการเคลื่อนไหวของดวงตามีความสำคัญอย่างมากสำหรับบริษัทที่สร้างแพลตฟอร์มและซอฟต์แวร์ใน Metaverse มันสามารถช่วยให้นักพัฒนาสามารถปรับเนื้อหาตามการตอบรับหรือลดความละเอียดในมุมมองรอบนอก ซึ่งสามารถช่วยประหยัดพลังการประมวลผล

ทีมนักวิทยาศาสตร์คอมพิวเตอร์ ซึ่งรวมถึง Guohao Lan อดีตผู้ช่วยหลังปริญญาเอกและ Tim Scargill นักศึกษาระดับ博士ที่กำลังศึกษา ได้พัฒนา EyeSyn เพื่อจำลองวิธีที่มนุษย์เฉลี่ยตอบสนองต่อสิ่งเร้าทางเสียงต่างๆ เพื่อที่จะทำเช่นนี้ พวกเขาได้ศึกษาวรรณกรรมทางวิทยาศาสตร์เกี่ยวกับการรับรู้และประมวลผลข้อมูลเสมือน

Lan เป็นศาสตราจารย์助理ที่ Delft University of Technology ในเนเธอร์แลนด์

“หากคุณให้ EyeSyn มีหลายอินพุตและรันหลายครั้ง คุณจะสร้างชุดข้อมูลการเคลื่อนไหวของดวงตาที่สังเคราะห์ขึ้นมา ซึ่งมีขนาดใหญ่พอที่จะฝึกอบรมคลาสสิฟายเออร์สำหรับโปรแกรมใหม่” Gorlatova กล่าว

การทดสอบระบบ

นักวิจัยได้ทดสอบความแม่นยำของดวงตาที่จำลองโดยใช้ข้อมูลที่มีอยู่แล้ว ดวงตาที่จำลองถูกใช้เพื่อวิเคราะห์วิดีโอของ Dr. Anthony Fauci ในการแถลงข่าว และเปรียบเทียบกับข้อมูลการเคลื่อนไหวของดวงตาของผู้ชมจริง นอกจากนี้ยังเปรียบเทียบชุดข้อมูลเสมือนที่ดวงตาที่จำลองมองไปที่งานศิลปะกับชุดข้อมูลที่รวบรวมจากผู้คนจริงที่ดูงานศิลปะในพิพิธภัณฑ์เสมือน ผลการวิจัยแสดงให้เห็นว่า EyeSyn สามารถจับคู่รูปแบบการมองเห็นที่แตกต่างกันของสัญญาณการมองเห็นได้อย่างใกล้ชิดและจำลองวิธีต่างๆ ที่ดวงตาของคนตอบสนอง

Gorlatova กล่าวว่าผลการวิจัยเหล่านี้แสดงให้เห็นว่าดวงตาที่จำลองมีคุณภาพที่ดีพอที่จะใช้เป็นฐานในการฝึกอบรมแพลตฟอร์มและซอฟต์แวร์ Metaverse ใหม่ๆ

“ข้อมูลสังเคราะห์ไม่สมบูรณ์แบบ แต่เป็นจุดเริ่มต้นที่ดี” Gorlatova กล่าว “บริษัทขนาดเล็กสามารถใช้มันแทนการพยายามสร้างชุดข้อมูลโลกแห่งความเป็นจริงด้วยตัวเอง (พร้อมผู้เข้าร่วมที่เป็นมนุษย์) และเนื่องจากการปรับแต่งอัลกอริทึมสามารถทำได้บนระบบท้องถิ่น ผู้คนจึงไม่ต้องกังวลเกี่ยวกับข้อมูลการเคลื่อนไหวของดวงตาส่วนตัวที่จะกลายเป็นส่วนหนึ่งของฐานข้อมูลขนาดใหญ่”