Simulované Pohyby Očí Pomáhají Školení Metaverza

Inženýři počítačových systémů z Duke University vyvinuli virtuální oči, které dokážou simulovat, jak lidé vnímají svět. Tyto virtuální oči jsou tak přesné, že je lze použít k výcviku programů pro virtuální realitu a rozšířenou realitu. Budou nesmírně prospěšné pro vývojáře, kteří chtějí vytvářet aplikace v metaverzu.

Výsledky budou prezentovány na mezinárodní konferenci o zpracování informací v senzorových sítích (PSN) ve dnech 4.-6. května.

Nové virtuální oči se nazývají EyeSyn.

Školení Algoritmů pro Práci jako Oči

Maria Gorlatova je asistentkou profesora elektrotechniky a počítačových systémů na Duke University.

“Pokud vás zajímá, zda lze určit, zda osoba čte komiks nebo pokročilou literaturu pouze podle jejího pohledu, můžete to udělat,” řekla Gorlatova.

“Ale školení takového algoritmu vyžaduje data od stovek lidí, kteří nosí headsety po několik hodin,” pokračovala Gorlatova. “Chtěli jsme vyvinout software, který nejen sníží obavy o soukromí spojené se shromažďováním těchto dat, ale také umožní menším společnostem, které nemají takové zdroje, zapojit se do hry metaverza.”

Lidské oči mohou dělat mnoho věcí, jako například ukazovat, zda jsme unaveni nebo vzrušeni, kde se soustředíme, nebo zda jsme odborníkem na určitou úlohu.

“Tam, kdeprioritizujete svůj pohled, říká много o vás jako o osobě,” řekla Gorlatova. “Může neúmyslně odhalit sexuální a rasové předsudky, zájmy, o kterých nechceme, aby je ostatní znali, a informace, o kterých možná ani nevíme.”

Data o pohybech očí jsou extrémně užitečná pro společnosti, které budují platformy a software v metaverzu. Mohou umožnit vývojářům přizpůsobit obsah reakcím na zapojení nebo snížit rozlišení v periferním vidění, což může ušetřit výpočetní výkon.

Tým počítačových vědců, který zahrnoval bývalého postdoktorálního asociála Guohao Lana a současného doktoranda Tima Scargilla, se pokusil vyvinout virtuální oči, aby napodobovaly, jak průměrný člověk reaguje na různé stimuly. K tomu se podívali na kognitivní vědeckou literaturu, která zkoumá, jak lidé vnímají svět a zpracovávají virtuální informace.

Lan je nyní asistentem profesora na Technické univerzitě v Delftu v Nizozemsku.

“Pokud EyeSyn poskytnete mnoho různých vstupů a spustíte ho dostatečně často, vytvoříte datovou sadu syntetických pohybů očí, která je dostatečně velká pro školení klasifikátoru (machine learning) pro nový program,” řekla Gorlatova.

Testování Systému

Výzkumníci otestovali přesnost syntetických očí pomocí veřejně dostupných dat. Nejprve analyzovali videa Dr. Anthonyho Fauciho, který se obracel na média během tiskových konferencí. Poté porovnali data s pohyby očí skutečných diváků. Také porovnali virtuální datovou sadu syntetických očí, které se dívaly na umění, se skutečnými datovými sadami, které byly shromážděny od lidí, kteří procházeli virtuální uměleckou galerií. Výsledky ukázaly, že EyeSyn může úzce odpovídat specifickým vzorcům skutečných signálů pohledu a simulovat různé způsoby, jakými lidé reagují svýma očima.

Gorlatova říká, že tyto výsledky naznačují, že virtuální oči jsou dostatečně dobré pro použití jako základ pro školení nových platforem a softwaru metaverza.

“Syntetická data samotná nejsou dokonalá, ale jsou dobrým výchozím bodem,” řekla Gorlatova. “Menší společnosti je mohou použít místo toho, aby trávily čas a peníze na vytváření vlastních reálných datových sad (s lidskými subjekty). A protože personalizace algoritmů může být provedena na místních systémech, lidé nemusí se bát, že jejich soukromá data o pohybech očí se stanou součástí velké databáze.”