人工智能

能源語言處理(NLP)能夠包含手語嗎?

mm

自然語言處理(NLP)是人工智慧(AI)中最重要的子領域之一。它涉及計算機分析和理解人類語言,並且常常用於翻譯軟件、聊天機器人、語音控制助手和各種工具。然而,它往往專注於口語,意味著它不涉及全球近7,000萬人使用的200多種手語。

但是,這種情況可能很快會改變,因為新的研究正在解決這個問題。語言技術研究所的碩士生Kayo Yin是新論文的共同作者,該論文研究了手語的NLP。

將手語納入NLP

題為“將手語納入自然語言處理”的論文在第59屆計算語言學會年會上獲得了最佳主題論文獎。其他共同作者包括以色列巴爾-伊蘭大學的Amit Moryossef、加拉德大學的Julie Hochgesang、巴爾-伊蘭大學和艾倫人工智慧研究所的Yoav Goldberg,以及匹茲堡大學計算和信息學院的Malihe Alikhani。

“手語,即使它是世界上使用的語言的一個重要部分,也不包括在內,”Yin說。“有需求和重要性需要有一種技術可以處理手語。”

根據作者,使用手語的社群幾十年來一直為了學習和使用語言以及讓語言被認可為合法語言而奮鬥。

手語的壓制

“然而,在一個主要使用口語的社會中,聾人被鼓勵使用口語或基於文本的通信,”論文指出。“手語從現代語言技術中被排除進一步壓制了手語,以利於口語。”

Yin對手語的興趣始於她在巴黎的École Polytechnique大學期間,在一個無家可歸的庇護所做宣傳工作。她認識到聾人在與他人建立聯繫方面的困難,因此Yin開始學習法國手語,並使手語翻譯成為她大學研究的重點。

手語主要依靠手勢、面部表情和頭部和身體運動,能夠同時傳達多個詞彙,不像口語。手語還使用捷徑,類似於口語中的代詞。NLP處理工具在處理複雜語言方面非常高效,遠超過計算機視覺模型。

“我們需要兩個領域的研究人員共同合作,”Yin說。“如果我們只看視覺效果,那麼我們就無法完全理解手語。”

根據Hochgesang的說法,她是一位聾人語言學家,專注於手語,她在學術文獻、語言課程和研究中幾乎沒有看到手語的存在。當談到學位時,語言只涉及口語。

“在個人層面上,這很痛苦。它完全忽略了我的存在,”Hochgesang說。“當我是學生時,我沒有看到自己在被描述的數據中,這使我很難建立聯繫。這種情況直到今天仍然沒有改善,這是令人遺憾的。唯一能夠改變這種情況的方法是讓我們更加參與。”

Yin說,這篇論文是激勵個人和團結社群的一大步。

“看到我寫的論文激勵了人們,我希望它能夠在這些社群中帶來變化,”Yin說。

Alex McFarland 是一名人工智能记者和作家,探索最新的人工智能发展。他曾与世界各地的众多人工智能初创公司和出版物合作。