Voivatko Koneen Oppimismenetelmät Pian Sisältää Viittomakielet?

Luonnollisen kielen prosessointi (NLP) on yksi tärkeimmistä tekoälyn (AI) alaalasta. Se käsittää tietokoneiden kykyä analyysia ja ymmärtää ihmisen kieltä, ja sitä käytetään usein käännösohjelmistoissa, chatboteissa, ääniohjatuissa avustimissa ja monissa työkaluissa eri aloilla. Kuitenkin se on usein keskittynyt puhuttuihin kielisiin, mikä tarkoittaa, että se ei koske 200:aa viittomakieltä, joita lähes 70 miljoonaa ihmistä käyttää ympäri maailmaa.

Tämä voi pian muuttua, kun uusi tutkimus käsittelee ongelmaa. Kielen teknologioiden instituutin maisteriopiskelija Kayo Yin on yksi uuden tutkimuksen tekijöistä, joka tutkii NLP:ää viittomakielten kanssa.

Viittomakielten sisällyttäminen NLP:ään

Tutkimus, jonka otsikko on ”Viittomakielten sisällyttäminen luonnollisen kielen prosessointiin”, sai parhaan teeman palkinnon 59. vuotuisessa Association for Computational Linguistics -konferenssissa. Muiden tekijöiden joukossa olivat Amit Moryossef Bar-Ilanin yliopistosta Israelissa; Julie Hochgesang Gallaudet-yliopistosta; Yoav Goldberg Bar-Ilanin yliopistosta ja Allen Institute for AI:sta; ja Malihe Alikhani Pittsburghin yliopiston tietojenkäsittely- ja informaatiotekniikan koulusta.

“Viittomakielet, vaikka ne ovat merkittävä osa maailmassa käytettävistä kielistä, eivät ole mukana”, Yin sanoi. “On tarve ja tärkeys siinä, että teknologiaa voidaan käyttää viittomakielten käsittelyyn.”

Tekijöiden mukaan viittomakieltä käyttävät yhteisöt ovat taistelleet vuosikymmenien ajan oppiakseen ja käyttääkseen kieltä ja saadakseen sen tunnustetuksi lailliseksi kielenä.

Viittomakielen tukahduttaminen

“Kuitenkin pääasiassa suullisessa yhteiskunnassa kuurot ihmiset kannustetaan jatkuvasti käyttämään puhuttuja kieliä huulien lukemisen tai tekstipohjaisen viestinnän avulla”, tutkimus toteaa. “Viittomakielten pois jättäminen modernista kieliteknologiasta tukahduttaa edelleen viittomisen puheen kielen hyväksi.”

Yinin kiinnostus viittomakieliin alkoi, kun hän teki vapaaehtoistyötä kodittomien turvapaikassa École Polytechniquessa Pariisissa. Hän tunnisti kuurojen yksilöiden vaikeudet muodostaa yhteyksiä muihin, joten Yin alkoi opiskella ranskan viittomakieltä ja teki viittomakielen käännöksestä yhden opinnäytetyönsä painopisteistä.

Viittomakielet, jotka riippuvat pääasiassa käden liikkeistä, kasvojen ilmeistä ja pään ja kehon liikkeistä, mahdollistavat useiden sanojen välittämisen yhtä aikaa, toisin kuin puhutut kielet. Viittomakielet käyttävät myös oikopolkuja, jotka toimivat samalla tavalla kuin pronominit puhutuissa kielissä. NLP-prosessorit ovat erittäin tehokkaita monimutkaisen kielen käsittelyssä, paljon parempia kuin tietokoneen näkömallit.

“Tarvitsemme tutkijoita molemmista aloista, jotka työskentelevät käsi kädessä”, Yin sanoi. “Emme voi täysin ymmärtää viittomakieltä, jos tarkastelemme vain visuaalisia aspekteja.”

Hochgesangin mukaan, joka on kuuro kielitieteilijä, joka keskittyy viittomakielten tutkimiseen, niitä oli vain vähän kirjallisuudessa, kielitieteellisissä luokissa ja tutkimuksissa, joita hän kohtasi opiskellessaan tutkintoa. Tutkinnon suorittamisen suhteen kieli sisältää vain puhetta.

“Henkilökohtaisesti tämä satutti”, Hochgesang sanoi. “Se jätti täysin huomiotta olemiseni. Kun olin opiskelija, en nähnyt itseäni kuvattuna aineistossa, ja se teki vaikeaksi yhteyden muodostamisen. Se, ettei asia ole parantunut paljonkaan nykyään, on valitettavaa. Ainoa tapa, jolla tämäntyyppinen asia muuttuu, on, jos meidät sisällytetään enemmän.”

Yin sanoo, että tutkimus on suuri askel eteenpäin motivoida yksilöitä ja yhdistää yhteisöjä.

“On todella jännittävää nähdä, miten tutkimus, jonka olen kirjoittanut, motivoi ihmisiä, ja toivon, että se voi aiheuttaa muutoksen näissä yhteisöissä”, Yin sanoi.