Kan NLP snart inkludere tegnsprog?

Naturlig sprogbehandling (NLP) er et af de vigtigste underområder af kunstig intelligens (AI). Det indebærer, at computere kan analysere og forstå menneskesprog, og det bruges ofte i oversættelsessoftware, chatbots, stemmekontrollerede assistenter og forskellige værktøjer i mange brancher. however, det fokuserer ofte på tale-sprog, hvilket betyder, at det ikke beskæftiger sig med de 200+ tegnsprog, som næsten 70 millioner mennesker afhænger af på tværs af kloden.

Dette kan snart ændre sig, da nyt forskning beskæftiger sig med problemet. Master-student i Language Technologies Institute Kayo Yin er medforfatter til en ny artikel, der undersøger NLP til tegnsprog.

Inklusion af tegnsprog i NLP

Artiklen med titlen “Inklusion af tegnsprog i naturlig sprogbehandling” modtog prisen for Bedste Tema-artikel på den 59. årlige møde i Association for Computational Linguistics. De andre medforfattere inkluderede Amit Moryossef fra Bar-Ilan University i Israel; Julie Hochgesang fra Gallaudet University; Yoav Goldberg fra Bar-Ilan University og Allen Institute for AI; og Malihe Alikhani fra University of Pittsburgh’s School of Computing and Information.

“Tegnsprog, selvom de er en betydelig del af de sprog, der bruges i verden, er ikke inkluderet,” sagde Yin. “Der er en efterspørgsel og en vigtighed i at have teknologi, der kan håndtere tegnsprog.”

Ifølge forfatterne har samfund, der bruger tegnsprog, kæmpet i årtier for at lære og bruge sprogene og for at få dem anerkendt som legitime.

Undertrykkelse af tegnsprog

“Men i et overvejende mundtligt samfund opmuntres døve mennesker konstant til at bruge tale-sprog gennem læberlæsning eller tekstbaseret kommunikation,” stod der i artiklen. “Udelukkelsen af tegnsprog fra moderne sprogteknologier undertrykker yderligere tegnsprog til fordel for tale-sprog.”

Yins interesse for tegnsprog opstod først, da hun udførte outreach-arbejde på et hjemløseherberg som bachelorstuderende på École Polytechnique i Paris. Hun erkendte, hvor svært det var for døve mennesker at etablere forbindelser med andre, så Yin begyndte at lære fransk tegnsprog og gjorde tegnsprog-oversættelse til et af fokusområderne i hendes bachelor-forskning.

Tegnsprog, der primært afhænger af håndbevægelser, ansigtsudtryk og hoved- og kropsbevægelser, gør det muligt at overføre multiple ord på én gang, til forskel fra tale-sprog. Tegnsprog bruger også genveje, der fungerer som pronominer i tale-sprog. NLP-behandlingsværktøjer er ekstremt effektive til at håndtere komplekst sprog, langt bedre end computer-vision-modeller.

“Vi har brug for forskere i begge fagområder til at arbejde hånd i hånd,” sagde Yin. “Vi kan ikke fuldt ud forstå tegnsprog, hvis vi kun ser på det visuelle.”

Ifølge Hochgesang, en døv lingvist, der fokuserer på tegnsprog, var de næsten ikke til stede i litteraturen, sprogkurser og forskning, hun mødte under sin uddannelse. Når det kommer til uddannelsen, omfatter sprog kun tale.

“På en personlig skala, sårede det. Det ignorerede fuldstændigt min måde at være på,” sagde Hochgesang. “Da jeg var studerende, så jeg ikke mig selv i de data, der blev beskrevet, og det gjorde det meget svært for mig at forbinde mig. At det ikke er blevet meget bedre i dag er ulykkeligt. Den eneste måde, dette kan ændre sig, er hvis vi inkluderes mere.”

Yin siger, at artiklen er et stort skridt fremad i motivering af individer og samfund.

“Det er virkelig spændende at se en artikel, jeg har skrevet, motivere mennesker, og jeg håber, det kan skabe en ændring i disse samfund,” sagde Yin.