Chatbot-urile AI se luptă cu înțelegerea lingvistică

Apariția chatbot-urilor cu inteligență artificială (AI) a reshusat experiențele conversaționale, aducând progrese care par să se alinieze cu înțelegerea și utilizarea limbajului uman. Aceste chatbot-uri, alimentate de modele lingvistice substanțiale, devin tot mai pricepute în navigarea complexităților interacțiunii umane.

Cu toate acestea, un studiu recent studiu a adus în lumină vulnerabilitatea persistentă a acestor modele în a distinge limbajul natural de nonsens. Investigarea efectuată de cercetătorii de la Universitatea Columbia prezintă perspective intrigante cu privire la posibilele îmbunătățiri ale performanței chatbot-urilor și procesării limbajului uman.

Cercetarea modelelor lingvistice

Echipa a elaborat asupra cercetării sale, care a implicat nouă modele lingvistice diferite supuse unor perechi de propoziții numeroase. Participanții umani la studiu au fost rugați să discernă propoziția mai “naturală” din fiecare pereche, reflectând utilizarea de zi cu zi. Modelele au fost evaluate în funcție de modul în care evaluările lor au rezonat cu alegerile umane.

Când modelele au fost comparate între ele, cele bazate pe rețele neuronale transformatorice au arătat o performanță superioară în comparație cu modelele mai simple de rețele neuronale recurente și modelele statistice. Cu toate acestea, chiar și modelele mai sofisticate au demonstrat erori, selectând adesea propoziții percepute ca fiind fără sens de către oameni.

Lupta cu propozițiile fără sens

Dr. Nikolaus Kriegeskorte, un investigator principal la Institutul Zuckerman al Universității Columbia, a subliniat succesul relativ al modelelor lingvistice mari în capturarea aspectelor cheie pe care modelele mai simple le-au ratat. El a notat: “Faptul că chiar și cele mai bune modele pe care le-am studiat încă pot fi păcălite de propoziții fără sens arată că calculele lor lipsesc de ceva despre modul în care oamenii procesează limbajul”.

Un exemplu izbitoare din studiu a subliniat modele precum BERT, care au judecat greșit naturalitatea propozițiilor, în contrast cu modele precum GPT-2, care s-au aliniat cu judecățile umane. Imperfecțiunile predominante în aceste modele, așa cum a remarcat Christopher Baldassano, Ph.D., profesor asistent de psihologie la Universitatea Columbia, ridică îngrijorări cu privire la dependența de sistemele AI în procesele de luare a deciziilor, atrăgând atenția asupra “punctelor oarbe” lor în etichetarea propozițiilor.

Implicații și direcții viitoare

Golurile în performanță și explorarea motivului pentru care unele modele excelează mai mult decât altele sunt domenii de interes pentru dr. Kriegeskorte. El crede că înțelegerea acestor discrepanțe poate propulsa semnificativ progresul în modelele lingvistice.

Studiul deschide, de asemenea, căi pentru explorarea posibilității ca mecanismele din chatbot-urile AI să declanșeze noi investigații științifice, ajutând neuroștiințificii să descifreze complexitățile creierului uman.

Tal Golan, Ph.D., autorul corespondent al lucrării, a exprimat interesul de a înțelege procesele de gândire umană, având în vedere capacitățile tot mai mari ale instrumentelor AI în procesarea limbajului. “Compararea înțelegerii lor lingvistice cu a noastră ne oferă o abordare nouă pentru a gândi despre modul în care gândim”, a comentat el.

Explorarea capacităților lingvistice ale chatbot-urilor AI a dezvăluit provocările persistente în alinierea înțelegerii lor cu cogniția umană.

Eforturile continue de a pătrunde în aceste diferențe și revelațiile care decurg din ele sunt poziționate nu numai pentru a îmbunătăți eficacitatea chatbot-urilor AI, ci și pentru a descifra multiplele straturi ale proceselor cognitive umane.

Juxtapunerea înțelegerii limbajului condusă de AI și a cogniției umane pune bazele unor explorări multifacetate, care pot reshapifica percepțiile și avansa cunoașterea în domeniile interconectate ale inteligenței artificiale și neuroștiinței.