Mișcarea Ochilor Simulați Ajută la Antrenarea Metaversului

Inginerii computeriști de la Universitatea Duke au dezvoltat ochi virtuali care pot simula modul în care oamenii privesc lumea. Ochii virtuali sunt atât de preciși încât pot fi utilizați pentru a antrena programe de realitate virtuală și realitate augmentată. Ei vor dovedi a fi incredibil de benefici pentru dezvoltatorii care doresc să creeze aplicații în metavers.

Rezultatele vor fi prezentate în perioada 4-6 mai la Conferința Internațională privind Procesarea Informațiilor în Rețele de Senzori (PSN).

Noii ochi virtuali se numesc EyeSyn.

Antrenarea Algoritmilor pentru a Funcționa ca Ochii

Maria Gorlatova este profesor asistent de inginerie electrică și informatică la Duke.

“Dacă sunteți interesați să detectați dacă o persoană citește o bandă desenată sau literatură avansată prin privirea ochilor, puteți face acest lucru,” a spus Gorlatova.

“Dar antrenarea unui astfel de algoritm necesită date de la sute de persoane care poartă căști timp de ore,” a continuat Gorlatova. “Am vrut să dezvoltăm un software care nu numai că reduce problemele de confidențialitate legate de colectarea acestor date, dar permite și companiilor mai mici care nu au aceste resurse să intre în jocul metaversului.”

Ochii umani pot face multe lucruri, cum ar fi să indice dacă suntem plictisiți sau entuziasmați, unde se concentrează atenția noastră sau dacă suntem experți într-o anumită sarcină.

“Unde vă prioritizați vederea spune multe despre dumneavoastră ca persoană,” a spus Gorlatova. “Poate dezvălui involuntar prejudecăți sexuale și rasiale, interese pe care nu dorim ca alții să le cunoască și informații pe care nu le cunoaștem despre noi înșine.”

Datele privind mișcarea ochilor sunt extrem de utile pentru companiile care construiesc platforme și software în metavers. Pot permite dezvoltatorilor să personalizeze conținutul în funcție de răspunsurile de angajament sau să reducă rezoluția în vederea periferică, ceea ce poate economisi putere de calcul.

Echipa de oameni de știință, care a inclus fostul asociat postdoctoral Guohao Lan și actualul student doctorand Tim Scargill, a încercat să dezvolte ochii virtuali pentru a imita modul în care un om mediu răspunde la diverse stimuli sonori. Pentru a face acest lucru, au examinat literatura științifică din domeniul cognitiv care explorează modul în care oamenii văd lumea și procesează informații virtuale.

Lan este acum profesor asistent la Universitatea Tehnică din Delft, Țările de Jos.

“Dacă oferiți EyeSyn multe intrări diferite și rulați-l de suficiente ori, veți crea un set de date de mișcări oculare sintetice care este suficient de mare pentru a antrena un clasificator (de învățare automată) pentru un nou program,” a spus Gorlatova.

Testarea Sistemului

Cercetătorii au testat acuratețea ochilor sintetici cu date disponibile public. Ochii au fost mai întâi puși să analizeze videoclipuri cu Dr. Anthony Fauci adresându-se mass-media în timpul conferințelor de presă. Echipa a comparat apoi datele cu mișcările oculare ale spectatorilor reali. De asemenea, au comparat un set de date virtual al ochilor sintetici care privesc arta cu seturi de date reale care au fost colectate de la oameni care au vizualizat o galerie de artă virtuală. Rezultatele au demonstrat că EyeSyn poate imita îndeaproape modelele distinctive ale semnalelor de privire reale și simula modurile diferite în care oamenii reacționează cu ochii.

Gorlatova spune că aceste rezultate sugerează că ochii virtuali sunt suficient de buni pentru ca companiile să îi utilizeze ca punct de plecare pentru a antrena noi platforme și software de metavers.

“Datele sintetice singure nu sunt perfecte, dar sunt un punct de plecare bun,” a spus Gorlatova. “Companiile mai mici pot utiliza aceste date în loc să cheltuiască timp și bani pentru a-și construi propriile seturi de date din lumea reală (cu subiecți umani). Și pentru că personalizarea algoritmilor poate fi făcută pe sisteme locale, oamenii nu trebuie să se îngrijoreze că datele lor private de mișcare a ochilor vor deveni parte a unei baze de date mari.”