시뮬레이션된 눈 운동이 메타버스 훈련에 도움

듀크 대학교의 컴퓨터 엔지니어들은 인간이 세계를 볼 때 시뮬레이션할 수 있는 가상 눈들을 개발했습니다. 가상 눈들은 가상 현실과 증강 현실 프로그램을 훈련하는 데 사용될 수 있을 만큼 정확합니다. 메타버스에서 애플리케이션을 개발하려는 개발자들에게 매우 유용할 것입니다.

결과는 5월 4-6일 정보 처리 센서 네트워크 국제 컨퍼런스(PSN)에서 발표될 예정입니다.

새로운 가상 눈은 EyeSyn이라고 합니다.

알고리즘을 눈과 같은 작동으로 훈련

마리아 고르라토바는 듀크 대학교의 노텔 네트워크 전기 및 컴퓨터 엔지니어링 조교수입니다.

고르라토바는 “만약 누군가가 만화책을 읽고 있는지 고급 문학을 읽고 있는지 눈만으로 판단하고 싶다면 할 수 있습니다”라고 말했습니다.

고르라토바는 “그러나 이러한 알고리즘을 훈련시키기 위해서는 수백 명의 사람들이 수 시간 동안 헤드셋을 착용한 데이터가 필요합니다. 우리는 이러한 종류의 데이터를 수집할 때 발생하는 개인 정보 보호 문제를 줄이고 메타버스 게임에 참여할 수 있는 작은 회사들에게도 소프트웨어를 개발하고 싶었습니다”라고 계속했습니다.

인간의 눈은 많은 것을 할 수 있습니다. 예를 들어, 우리가 지루하거나 흥奮한지, 집중이 어디에 있는지, 또는 특정 작업에 전문가인지 나타낼 수 있습니다.

고르라토바는 “당신이 시선을優先하는 곳은 당신에 대해 많은 것을 말해줍니다”라고 말했습니다. “그것은 간접적으로 성적 및 인종적 편향, 우리가 다른 사람에게 알리지 않으려는 관심사, 그리고 우리가 스스로도 모르는 정보를 나타낼 수 있습니다.”

눈 운동 데이터는 메타버스에서 플랫폼과 소프트웨어를 구축하는 회사들에게 매우 유용합니다. 그것은 개발자가 참여 응답에 맞게 콘텐츠를 맞추거나 주변 시야의 해상도를 줄일 수 있게 해주며, 이는 계산 능력을節約할 수 있습니다.

컴퓨터 과학자 팀은 구호과학 문헌을 연구하여 인간이 세계를 어떻게 보는지, 가상 정보를 어떻게 처리하는지 살펴보았습니다. 그들은 다양한 자극 소리에 대한 평균 인간의 반응을 시뮬레이션할 수 있는 가상 눈들을 개발하려고 했습니다.

구호과학 문헌을 연구하여 인간이 세계를 어떻게 보는지, 가상 정보를 어떻게 처리하는지 살펴보았습니다. 그들은 다양한 자극 소리에 대한 평균 인간의 반응을 시뮬레이션할 수 있는 가상 눈들을 개발하려고 했습니다.

현재 델프트 기술大学의 조교수인 구호과학 전임 연구원 구오하오 란과 현재 박사 과정 학생인 팀 스카길이 포함된 팀은 다양한 자극 소리에 대한 평균 인간의 반응을 시뮬레이션할 수 있는 가상 눈들을 개발하려고 했습니다.

고르라토바는 “만약 EyeSyn에 많은 입력을 주고 충분히 실행한다면, 새로운 프로그램에 대한 분류기를 훈련할 수 있을 만큼 큰 합성 눈 운동 데이터 세트를 생성할 수 있습니다”라고 말했습니다.

시스템 테스트

연구자들은 공개적으로 उपलब한 데이터를 사용하여 합성 눈의 정확성을 테스트했습니다. 그들은 먼저 드. 앤서니 파우치가 언론을 상대로 하는 기자 회견에서 비디오를 분석했습니다. 그런 다음 실제 시청자의 눈 운동 데이터와 비교했습니다. 또한 가상 미술관을 통해 실제 데이터가 수집된 데이터와 비교하여 합성 눈이 미술을看着 있는 가상 데이터 세트를 비교했습니다. 결과는 EyeSyn이 실제 눈 운동 패턴을 밀접하게 일치시키고 시뮬레이션할 수 있음을 보여주었습니다.

고르라토바는 이러한 결과가 가상 눈이 메타버스 플랫폼과 소프트웨어를 훈련하는 데 사용할 수 있는 기준이 된다는 것을 시사한다고 말했습니다.

고르라토바는 “합성 데이터만으로는 완벽하지 않지만, 좋은 시작점입니다”라고 말했습니다. “작은 회사들은 EyeSyn을 사용하여 실제 데이터를 수집하는 데 시간과 돈을 투자할 수 있습니다. 또한 알고리즘의 개인화가 로컬 시스템에서 수행될 수 있으므로 사람들이 자신의 눈 운동 데이터가 큰 데이터베이스의 일부가 되는 것을 걱정할 필요가 없습니다.”