AI-chatbotit kamppailevat kielellisen ymmärryksen kanssa

Tekoälyn (AI) chatbottien tulo on muokannut keskustelukokemuksia ja tuonut esiin edistysaskeleita, jotka näyttävät vastaavan ihmisen kielen ymmärtämistä ja käyttöä. Nämä chatbotit, joita ruokkivat merkittäviä kielimalleja, ovat tulossa taitavia navigoimaan ihmisten välisen vuorovaikutuksen monimutkaisissa vaiheissa.

Kuitenkin viimeaikainen opiskella on tuonut esiin näiden mallien jatkuvan haavoittuvuuden erottaa luonnollinen kieli hölynpölystä. Columbian yliopiston tutkijoiden tekemä tutkimus tarjoaa kiehtovia näkemyksiä chatbotin suorituskyvyn ja ihmisen kielen käsittelyn mahdollisista parannuksista.

Kielimallien kysely

Tiimi kehitti tutkimustaan, johon osallistui yhdeksän erilaista kielimallia, joihin kohdistui useita lausepareja. Tutkimukseen osallistuneita ihmisiä pyydettiin erottamaan jokaisesta parista "luonnollisempi" lause, joka kuvastaa jokapäiväistä käyttöä. Sitten malleja arvioitiin sen perusteella, resonoivatko niiden arviot ihmisten valintojen kanssa.

Kun mallit asetettiin vastakkain, muuntajahermoverkkoihin perustuvat mallit osoittivat ylivoimaista suorituskykyä verrattuna yksinkertaisempiin toistuviin hermoverkkomalleihin ja tilastollisiin malleihin. Kuitenkin jopa kehittyneemmät mallit osoittivat virheitä, valiten usein lauseita, jotka ihmiset pitivät järjettöminä.

Taistelu järjettömien lauseiden kanssa

Columbian yliopiston Zuckerman-instituutin tutkimuksen johtaja, tohtori Nikolaus Kriegeskorte, korosti suurten kielimallien suhteellista menestystä yksinkertaisempien mallien huomiotta jättämien keskeisten näkökohtien havaitsemisessa. Hän totesi: ”Se, että jopa parhaat tutkimamme mallit voivat edelleen joutua järjettömien lauseiden hämätämiksi, osoittaa, että niiden laskelmista puuttuu jotain siitä, miten ihmiset käsittelevät kieltä.”

Eräs silmiinpistävä esimerkki tutkimuksesta nosti esiin malleja, kuten BERT, jotka arvioivat virheellisesti lauseiden luonnollisuutta, vastakohtana GPT-2:n kaltaisille malleille, jotka olivat linjassa ihmisten arvioiden kanssa. Kuten Columbian psykologian apulaisprofessori Christopher Baldassano, Ph.D. totesi, näissä malleissa vallitsevat puutteet herättävät huolta tekoälyjärjestelmien riippuvuudesta päätöksentekoprosesseissa ja kiinnittävät huomiota niiden ilmeisiin "sokeisiin kulmiin" merkinnöissä. lauseita.

Seuraukset ja tulevaisuuden suunnat

Tohtori Kriegeskortea kiinnostaa suorituskyvyn puutteet ja sen tutkiminen, miksi jotkut mallit ovat parempia kuin toiset. Hän uskoo, että näiden eroavaisuuksien ymmärtäminen voi merkittävästi edistää kielimallien kehitystä.

Tutkimus avaa myös mahdollisuuksia selvittää, voivatko tekoälychatbottien mekanismit käynnistää uusia tieteellisiä tutkimuksia ja auttaa neurotieteilijöitä selvittämään ihmisaivojen monimutkaisuuksia.

Artikkelin vastaava kirjoittaja, filosofian tohtori Tal Golan, ilmaisi kiinnostuksensa ihmisen ajatteluprosessien ymmärtämiseen ottaen huomioon tekoälytyökalujen kasvavat kyvyt kielenkäsittelyssä. ”Heidän kielenymmärryksensä vertaaminen omaamme antaa meille uuden lähestymistavan ajattelutapaamme”, hän kommentoi.

Tekoälykeskustelubottien kielellisten kykyjen tutkiminen on paljastanut jatkuvat haasteet niiden ymmärryksen ja ihmisen kognition yhteensovittamisessa.

Jatkuvat pyrkimykset syventyä näihin eroihin ja niistä johtuvat paljastukset ovat valmiita paitsi lisäämään tekoäly-chatbottien tehokkuutta myös purkamaan ihmisen kognitiivisten prosessien lukemattomia kerroksia.

Tekoälyn ohjaaman kielen ymmärtämisen ja ihmisen kognition rinnakkain luo perustan monitahoisille tutkimuksille, jotka mahdollisesti muokkaavat käsityksiä ja edistävät tietämystä tekoälyn ja neurotieteen toisiinsa liittyvillä aloilla.