Mișcarea Ochilor Simulată Ajută La Antrenarea Metaverse

Inginerii computeriști de la Universitatea Duke au dezvoltat ochi virtuali care pot simula modul în care oamenii privesc lumea. Ochii virtuali sunt atât de preciși încât pot fi utilizați pentru a antrena programe de realitate virtuală și realitate augmentată. Ei se vor dovedi incredibil de benefici pentru dezvoltatorii care doresc să creeze aplicații în metaverse.

Rezultatele urmează să fie prezentate în perioada 4-6 mai la Conferința Internațională privind Prelucrarea Informațiilor în Rețele de Senzori (PSN). 

Noii ochi virtuali se numesc EyeSyn. 

Antrenarea Algoritmilor pentru a Funcționa ca Ochii

Maria Gorlatova este profesor asistent de inginerie electrică și computerizată la Duke. 

“Dacă sunteți interesați să detectați dacă o persoană citește o bandă desenată sau literatură avansată doar uitându-vă la ochii lor, puteți face acest lucru,” a spus Gorlatova. 

“Dar antrenarea unui astfel de algoritm necesită date de la sute de oameni care poartă căști timp de ore în șir,” a continuat Gorlatova. “Am vrut să dezvoltăm un software care nu numai că reduce problemele de confidențialitate asociate cu colectarea acestor date, dar să permită și companiilor mai mici care nu au aceste resurse să intre în jocul metaverse.”

Ochii umani pot face multe lucruri, cum ar fi să indice dacă suntem plictisiți sau entuziasmați, unde se concentrează atenția noastră sau dacă suntem experți într-o anumită sarcină. 

“Unde vă concentrați vederea spune multe despre dumneavoastră ca persoană,” a spus Gorlatova. “Poate dezvălui involuntar prejudecăți sexuale și rasiale, interese pe care nu dorim să le știe alții și informații pe care poate nu le știm despre noi înșine.”

Datele privind mișcarea ochilor sunt extrem de utile pentru companiile care construiesc platforme și software în metaverse. Pot permite dezvoltatorilor să personalizeze conținutul în funcție de răspunsurile de angajament sau să reducă rezoluția în vederea periferică, ceea ce poate economisi putere de calcul. 

Echipa de oameni de știință în domeniul calculatoarelor, care a inclus fostul asociat postdoctoral Guohao Lan și actualul student doctorand Tim Scargill, a încercat să dezvolte ochii virtuali pentru a imita modul în care un om mediu răspunde la o varietate de stimuli sonori. Pentru a face acest lucru, au examinat literatura științifică cognitivă care explorează modul în care oamenii văd lumea și procesează informații virtuale. 

Lan este acum profesor asistent la Universitatea Tehnică Delft din Țările de Jos. 

“Dacă oferiți EyeSyn multe intrări diferite și rulați-l de suficiente ori, veți crea un set de date de mișcări oculare sintetice care este suficient de mare pentru a antrena un clasificator (de învățare automată) pentru un nou program,” a spus Gorlatova.

Testarea Sistemului

Cercetătorii au testat acuratețea ochilor sintetici cu date disponibile public. Ochii au fost mai întâi puși să analizeze videoclipuri cu Dr. Anthony Fauci care se adresează mass-mediei în timpul conferințelor de presă. Echipa a comparat apoi datele cu mișcările ochilor unor spectatori reali. De asemenea, au comparat un set de date virtuale al ochilor sintetici care privesc arta cu seturi de date reale colectate de la oameni care privesc printr-un muzeu de artă virtual. Rezultatele au demonstrat că EyeSyn poate reproduce cu exactitate modelele distincte ale semnalelor de privire reale și simula modurile diferite în care reacționează ochii oamenilor.

Gorlatova spune că aceste rezultate sugerează că ochii virtuali sunt suficient de buni pentru ca companiile să îi utilizeze ca punct de plecare pentru a antrena noi platforme și software metaverse. 

“Datele sintetice nu sunt perfecte, dar sunt un punct de plecare bun,” a spus Gorlatova. “Companiile mai mici le pot utiliza în loc să cheltuiască timp și bani pentru a-și construi propriile seturi de date din lumea reală (cu subiecți umani). Și deoarece personalizarea algoritmilor poate fi făcută pe sisteme locale, oamenii nu trebuie să se îngrijoreze că datele lor privind mișcarea ochilor vor deveni parte a unei baze de date mari.”