Tekoälychatbotit kamppailevat kielellisen ymmärtämisen kanssa

Tekoälychatbotien kehittyminen on muuttanut keskustelukokemuksia ja tuonut edistystä, joka näyttää olevan rinnakkainen ihmisen kielen ymmärtämiselle ja käytölle. Nämä chatbotit, jotka perustuvat merkittäviin kielimalleihin, ovat kehittyneet taitaviksi navigoimaan ihmisen vuorovaikutuksen monimutkaisuuksissa.

Tutkimus tutkimuksesta on kuitenkin paljastanut näiden mallien jatkuvan haavoittuvuuden erottamaan luonnollisen kielen ja nonsense-sentencet. Columbian yliopiston tutkijoiden suorittama tutkimus esittää mielenkiintoisia näkemyksiä chatbottien suorituskyvyn ja ihmisen kielen prosessoinnin parantamiseksi.

Kysely kielimalleihin

Tutkijaryhmä tarkasteli yhdeksää eri kielimalleja, joita altistettiin useille lauseparille. Tutkimuksen ihmiskohtaiset osallistujat pyydettiin tunnistamaan luonnollisempi lause kussakin parissa, heijastellen jokapäiväistä käyttöä. Mallit arvioitiin sen perusteella, vastaavatko heidän arviointinsa ihmisten valintoihin.

Kun malleja verrattiin toisiinsa, transformer-neuraaliverkkoja käyttävät mallit osoittivat parempaa suorituskykyä verrattuna yksinkertaisempiin rekurrenttisiin neuraaliverkkomalleihin ja tilastollisiin malleihin. Kuitenkin jopa kehittyneimmät mallit osoittivat virheitä, usein valitsemalla lauseita, joita ihmiset kokivat nonsense-lausetyyppejinä.

Taistelu nonsense-lausetyypin kanssa

Tohtori Nikolaus Kriegeskorte, Columbian Zuckerman-instituutin päätutkija, korosti suurten kielimallejen suhteellista menestystä taltuttaessaan avainasioita, joita yksinkertaisemmat mallit eivät havainneet. Hän totesi: “Se, että jopa parhaat mallit, joita tutkimme, voivat silti olla hämmentyneitä nonsense-lausetyypeillä, osoittaa, että heidän laskentansa puuttuu jotain siitä, miten ihmiset prosessoivat kieltä.”

Tutkimuksesta löytyi hämmästyttävä esimerkki, jossa mallit kuten BERT arvioivat väärin lauseiden luonnollisuutta, toisin kuin mallit kuten GPT-2, jotka olivat linjassa ihmisten arvioiden kanssa. Näiden mallien vallitsevat virheet, joita Christopher Baldassano, Psy.D., Columbian yliopiston psykologian apulaisprofessori huomautti, herättävät huolta siitä, miten voimme luottaa tekoälyjärjestelmiin päätöksenteossa, korostamalla heidän ilmeisiä “sokeita pisteitä” lauseiden merkinnöissä.

Johtopäätökset ja tulevaisuuden suunnat

Suorituskyvyn aukot ja tutkimus siitä, miksi jotkut mallit menestyvät enemmän kuin toiset, ovat kiinnostuksen kohteita tohtori Kriegeskortelle. Hän uskoo, että ymmärtämällä nämä eroavaisuudet voidaan edistää merkittävästi kielimalleja.

Tutkimus avaa myös mahdollisuuksia tutkia, voivatko tekoälychatbottien mekanismit herättää uusia tieteellisiä kysymyksiä, auttaen neurotieteilijöitä selvittämään ihmisaivojen monimutkaisuuksia.

Tal Golan, Psy.D., tutkimuksen vastaava tekijä, ilmoitti kiinnostuksensa ymmärtäämään ihmisen ajatteluprosesseja, koska tekoälytyökalujen kielen prosessointikapasiteetit kasvavat. “Vertaamalla heidän kielen ymmärtämistään meidän omamme kanssa, meillä on uusi lähestymistapa ajatella, miten me ajattelemme”, hän kommentoi.

Tekoälychatbottien kielellisen ymmärtämisen tutkiminen on paljastanut jäävät haasteet saada heidän ymmärtäminen linjassa ihmisen kognition kanssa.

Jatkuva ponnistus tutkia näitä eroja ja seuraavia paljastuksia on valmis sekä parantamaan tekoälychatbottien tehokkuutta että paljastamaan ihmisen kognitiivisten prosessien mon Kerroksellisuuden.

Tekoälyohjatun kielen ymmärtämisen ja ihmisen kognition rinnastus luo monitahoisen tutkimuksen perustan, joka voi muuttaa käsityksiä ja edistää tietoa tekoälyn ja neurotieteen yhdistetyissä alueissa.