터치스크린에서 우리가 타이핑하는 방식 예측하는 AI 모델

아알토 대학과 핀란드 인공지능 센터(FCAI)의 연구자들이 개발한 새로운 인공지능(AI) 모델은 최초로 사용자가 스크린에서 타이핑할 때 눈과 손가락을 어떻게 움직이는지 예측하는 모델입니다. 이 새로운 개발은 우리가 보는 것으로 타이핑하고 오류를 동시에 감지해야 하는 어려운 기술에 대한 새로운 통찰력을 제공합니다.

이 AI는 개별 사용자가 키보드 디자인에 관계없이 문장을 타이핑하는 방식을 시뮬레이션할 수 있으며, 오류를 만들고 감지할 수 있습니다. 오류가 항상 즉시 감지되지는 않지만, AI는 이를 수정할 수 있습니다. AI의 또 다른 측면은 자동 수정이나 다른 키보드 디자인과 같은 상황에 따라 사용자의 작성 스타일이 어떻게 달라지는지 예측할 수 있다는 것입니다.

새로운 AI 모델의 개발은 Dr. Jussi Jokinen이 주도했으며, 이달 12일 ACM CHI에서 발표되었습니다.

“이전까지 터치스크린 타이핑은 주로 손가락이 어떻게 움직이는지의 관점에서 이해되었습니다.” Jokinen은 말합니다. “AI 기반 방법은 이러한 움직임에 대한 새로운 통찰력을 제공했습니다. 우리는 어디를 보고 언제 보는지 결정하는 것이 중요하다는 것을 발견했습니다. 이제 우리는 휴대폰이나 태블릿에서 사용자가 어떻게 타이핑하는지에 대한 예측을 더 잘할 수 있습니다.”

“이제 우리는 터치스크린에서 인간이 타이핑하는 방식의 현실적인 시뮬레이션을 가지고 있습니다. 따라서 키보드 디자인을 최적화하여 타이핑 오류를 줄이고 타이핑 속도를 높이며, 무엇보다도 사용자의 불편함을 줄일 수 있을 것입니다.” Jokinen은 계속합니다.

https://www.youtube.com/watch?v=6cl2OoTNB6g&t=1s

다양한 유형의 사용자에 대한 고려

이 AI 모델은 단일한 일반 사용자 유형만을 위한 것이 아닙니다. 다양한 유형의 사용자에 대한 고려를 할 수 있습니다. 이는 운동 장애를 가진 개인을 포함하며, AI는 타이핑 보조 도구 또는 특정 인터페이스를 개발하여 이를 지원할 수 있습니다.

의료적인 문제를 제외하고, AI는 또한 개인의 작성 스타일을 파악하여 텍스트에서 반복적인 오류를 식별하는 등 다양한 작업을 수행할 수 있습니다. 이러한 데이터를 통해 개인에게 가장 적합한 키보드 또는 자동 수정 시스템을 결정할 수 있습니다.

팀의 이전 연구

연구자들은 이전에 인간의 타이핑 방식에 대한 인지 모델을 구축하여, 스스로 타이핑할 수 있는 생성 모델을 개발했습니다. 이는 핀란드 인공지능 센터의 상호작용 인공지능 프로젝트의 일부입니다.

이 연구는 강화 학습에 크게 의존하며, 이는 보상과/또는 처벌 시스템을 생성하여 로봇이 문제를 해결하는 데 사용됩니다. 강화 학습은 인간을 시뮬레이션하기 위해 사용되었으며, 인간과 유사한 행동을 생성할 수 있었습니다.

“우리는 모델에 인간과 동일한 능력과 제한을 주었습니다. 효율적으로 타이핑하도록 요청했을 때, 모델은 이러한 능력을 최대한 활용하는 방법을 발견했습니다. 결과는 인간의 타이핑 방식과 매우 유사합니다. 인간 데이터로 모델을 교육할 필요가 없습니다.” Jokinen은 말합니다.

인간 타이핑 데이터와 비교했을 때, 새로운 모델의 예측은 정확했습니다. 팀은 이제 느린 타이핑과 빠른 타이핑 기술을 시뮬레이션하려고 합니다. 이는 타이핑 기술을 개선하고자 하는 개인을 위한 학습 모듈의 설계에 도움이 될 수 있습니다.