Movimento Oculare Simulato Aiuta a Formare il Metaverso

Gli ingegneri informatici dell’Università di Duke hanno sviluppato occhi virtuali che possono simulare come gli esseri umani vedono il mondo. Gli occhi virtuali sono così precisi che possono essere utilizzati per addestrare programmi di realtà virtuale e realtà aumentata. Saranno incredibilmente benefici per gli sviluppatori che desiderano creare applicazioni nel metaverso.

I risultati saranno presentati il 4-6 maggio alla Conferenza internazionale su Elaborazione dell’informazione nei sensori (PSN).

I nuovi occhi virtuali si chiamano EyeSyn.

Addestrare gli Algoritmi a Funzionare come Occhi

Maria Gorlatova è professore assistente di Ingegneria elettrica e informatica alla Duke.

“Se sei interessato a rilevare se una persona sta leggendo un fumetto o letteratura avanzata guardando solo i suoi occhi, puoi farlo”, ha detto Gorlatova.

“Ma addestrare questo tipo di algoritmo richiede dati di centinaia di persone che indossano cuffie per ore alla volta”, ha continuato Gorlatova. “Volevamo sviluppare un software che non solo riduca le preoccupazioni sulla privacy che derivano dalla raccolta di questo tipo di dati, ma che consenta anche alle piccole aziende di entrare nel gioco del metaverso senza dover spendere tempo e denaro per costruire i propri set di dati nel mondo reale”.

Gli occhi umani possono fare molte cose, come indicare se siamo annoiati o eccitati, dove si concentra l’attenzione o se siamo esperti in un determinato compito.

“Dove si priorizza la visione dice molto su di noi come persone, anche”, ha detto Gorlatova. “Può rivelare involontariamente pregiudizi sessuali e razziali, interessi che non vogliamo che gli altri conoscano e informazioni che potremmo non conoscere nemmeno noi stessi”.

I dati del movimento oculare sono estremamente utili per le aziende che costruiscono piattaforme e software nel metaverso. Possono consentire agli sviluppatori di personalizzare il contenuto in base alle risposte di coinvolgimento o ridurre la risoluzione nella visione periferica, il che può risparmiare potenza computazionale.

Il team di scienziati informatici, che includeva l’ex associato post-dottorato Guohao Lan e l’attuale studente di dottorato Tim Scargill, ha cercato di sviluppare gli occhi virtuali per imitare come un essere umano medio risponde a una varietà di stimoli sonori. Per farlo, hanno esaminato la letteratura scientifica sulla cognizione che esplora come gli esseri umani vedono il mondo e processano le informazioni virtuali.

Lan è ora professore assistente all’Università tecnica di Delft, nei Paesi Bassi.

“Se si dà a EyeSyn molti input diversi e lo si esegue abbastanza volte, si creerà un set di dati di movimenti oculari sintetici abbastanza grande da addestrare un classificatore (di apprendimento automatico) per un nuovo programma”, ha detto Gorlatova.

Test del Sistema

I ricercatori hanno testato l’accuratezza degli occhi sintetici con dati pubblicamente disponibili. Gli occhi sono stati inizialmente utilizzati per analizzare i video del dottor Anthony Fauci che si rivolge alla stampa durante le conferenze stampa. Il team ha quindi confrontato i dati con i movimenti oculari di spettatori reali. Hanno anche confrontato un set di dati virtuale degli occhi sintetici che guardano un’opera d’arte con set di dati reali raccolti da persone che guardavano un museo d’arte virtuale. I risultati hanno dimostrato che EyeSyn può strettamente corrispondere ai modelli distinti di segnali di sguardo reali e simulare i diversi modi in cui gli occhi delle persone reagiscono.

Gorlatova afferma che questi risultati suggeriscono che gli occhi virtuali sono abbastanza buoni perché le aziende li utilizzino come base per addestrare nuove piattaforme e software del metaverso.

“I dati sintetici da soli non sono perfetti, ma sono un buon punto di partenza”, ha detto Gorlatova. “Le piccole aziende possono utilizzarli invece di spendere tempo e denaro per costruire i propri set di dati nel mondo reale (con soggetti umani). E poiché la personalizzazione degli algoritmi può essere effettuata su sistemi locali, le persone non devono preoccuparsi che i loro dati di movimento oculare privati diventino parte di un grande database”.