Model AI Przewiduje, Jak Piszemy na Ekranach Dotykowych

Nowy model sztucznej inteligencji (AI) opracowany przez badaczy z Uniwersytetu Aalto i Fińskiego Centrum Sztucznej Inteligencji (FCAI) jest pierwszym tego rodzaju modelem, który przewiduje, jak poruszamy oczami i palcami podczas pisania na ekranach. Nowy rozwój dostarcza nowych spostrzeżeń na temat tego trudnego umiejętności, które zmuszają nas do polegania na naszym zmyśle wzroku, aby pisać i wykrywać błędy jednocześnie.

AI jest w stanie symulować, jak osoba będzie pisać zdanie na dowolnym projekcie klawiatury i zarówno popełnia, jak i wykrywa błędy. Chociaż błędy nie są zawsze wykrywane od razu, AI jest w stanie je poprawić, podobnie jak my. Innym aspektem AI jest to, że może przewidzieć, jak styl pisarski ludzi zmienia się w zależności od okoliczności, takich jak auto-korekta lub inny projekt klawiatury.

Dr Jussi Jokinen kierował pracami nad nowym modelem AI, który został przedstawiony w tym miesiącu na ACM CHI 12 maja.

„Wcześniej, pisanie na ekranach dotykowych było rozumiane głównie z perspektywy, jak się poruszają nasze palce”, mówi Jokinen. „Metody oparte na AI pomogły rzucić nowe światło na te ruchy: to, co odkryliśmy, to znaczenie decyzji, kiedy i gdzie spojrzeć. Teraz możemy dokonywać znacznie lepszych przewidywań, jak ludzie piszą na swoich telefonach lub tabletach.”

„Teraz, gdy mamy realistyczną symulację, jak ludzie piszą na ekranach dotykowych, powinno być znacznie łatwiej zoptymalizować projekty klawiatur, aby poprawić pisania – co oznacza mniej błędów, szybsze pisania i, co dla mnie najważniejsze, mniej frustracji”, kontynuuje Jokinen.

https://www.youtube.com/watch?v=6cl2OoTNB6g&t=1s

Uwzględnianie Różnych Typów Użytkowników

Model AI nie działa tylko z jednym typem użytkownika, ale jest w stanie dostosować się do różnych typów użytkowników. Może to obejmować osoby z niepełnosprawnościami ruchowymi, którym AI mogłaby pomóc, rozwijając pomocne narzędzia do pisania lub specjalne interfejsy.

Poza problemami medycznymi, AI może również uwzględniać osoby z różnymi stylami pisarskimi, robiąc rzeczy takie jak identyfikowanie wzorców, gdy osoba powtarza błędy w tekstach. Z tymi danymi można określić najlepszy typ klawiatury lub systemu auto-korekty dla danej osoby.

Poprzednia Praca Zespołu

Badacze wcześniej opracowali swoją pracę wokół modelu poznawczego sposobu, w jaki ludzie piszą, co doprowadziło do stworzenia modelu generatywnego, który mógł pisać samodzielnie. To wszystko jest częścią projektu Interactive AI w Fińskim Centrum Sztucznej Inteligencji.

Badania opierają się głównie na uczeniu ze wzmocnieniem, które działa poprzez tworzenie systemu nagród i/lub kar, często używanego do nauczania robotów, jak rozwiązywać problemy za pomocą prób i błędów. Uczenie ze wzmocnieniem zostało użyte przez zespół do symulowania ludzi tym razem, co umożliwiło im wygenerowanie zachowania podobnego do ludzkiego.

„Daliśmy modelowi te same zdolności i ograniczenia, które mamy my, jako ludzie. Gdy poprosiliśmy go, aby pisał wydajnie, samodzielnie odkrył, jak najlepiej wykorzystać te zdolności. Efekt końcowy jest bardzo podobny do tego, jak ludzie piszą, bez konieczności nauczania modelu z danych ludzkich”, mówi Jokinen.

Gdy porównano dane dotyczące pisania ludzi z nowym modelem AI, przewidywania okazały się dokładne. Zespół teraz planuje symulować techniki pisania wolne i szybkie, co mogłoby pomóc w projektowaniu modułów szkoleniowych dla osób, które chcą poprawić swoje umiejętności pisarskie.