Abilitățile de raționament analogic ale IA: Provocarea inteligenței umane?

Raționamentul analogic, abilitatea unică pe care oamenii o posedă pentru a rezolva probleme nefamiliare prin trasarea de paralele cu probleme cunoscute, a fost considerat mult timp o funcție cognitivă distinctiv umană. Cu toate acestea, un studiu revoluționar realizat de psihologii de la UCLA prezintă constatări convingătoare care ne-ar putea determina să reevaluăm acest lucru.

GPT-3: La nivelul inteligenței umane?

Cercetarea de la UCLA a constatat că GPT-3, un model de limbaj IA dezvoltat de OpenAI, demonstrează capacități de raționament aproape la nivelul studenților din facultate, în special atunci când li se cere să rezolve probleme asemănătoare cu cele din testele de inteligență și examenele standardizate, cum ar fi SAT. Această revelație, publicată în revista Nature Human Behaviour, ridică o întrebare intrigantă: GPT-3 emulează raționamentul uman din cauza setului său extins de date de antrenament lingvistic sau accesează un proces cognitiv complet nou?

Funcționarea exactă a GPT-3 rămâne ascunsă de OpenAI, lăsând cercetătorii de la UCLA curioși cu privire la mecanismul din spatele abilităților sale de raționament analogic. În ciuda performanței lăudabile a GPT-3 la anumite sarcini de raționament, instrumentul nu este lipsit de defecte. Taylor Webb, autorul principal al studiului și cercetător postdoctoral la UCLA, a remarcat: “În timp ce constatările noastre sunt impresionante, este esențial să subliniem că acest sistem are constrângeri semnificative. GPT-3 poate efectua raționament analogic, dar se luptă cu sarcini triviale pentru oameni, cum ar fi utilizarea unor instrumente pentru o sarcină fizică.”

Capacitățile GPT-3 au fost testate utilizând probleme inspirate de Matricele Progresive Raven – un test care implică secvențe complexe de forme. Prin convertirea imaginilor într-un format text pe care GPT-3 îl putea descifra, Webb a asigurat că acestea erau complet noi pentru IA. Când a fost comparat cu 40 de studenți de la UCLA, GPT-3 nu numai că a egalat performanța umană, dar a și reflectat greșelile făcute de oameni. Modelul IA a rezolvat corect 80% din probleme, depășind media scorurilor umane, dar situându-se în intervalul performanțelor umane de top.

Echipa a investigat mai departe capacitățile GPT-3 utilizând întrebări de analogie SAT nepublicate, cu IA care a depășit media umană. Cu toate acestea, a ezitat ușor atunci când a încercat să tragă analogii din povestiri scurte, deși modelul GPT-4 mai nou a arătat rezultate îmbunătățite.

Punerea în legătură a diviziei de cogniție IA-umană

Cercetătorii de la UCLA nu se opresc la simple comparații. Ei au început să dezvolte un model de computer inspirat de cogniția umană, comparând constant capacitățile sale cu modelele IA comerciale. Keith Holyoak, profesor de psihologie la UCLA și coautor, a remarcat: “Modelul nostru de IA psihologic a strălucit în probleme de analogie până la actualizarea recentă a GPT-3, care a afișat capacități superioare sau echivalente.”

Cu toate acestea, echipa a identificat anumite domenii în care GPT-3 a fost în urmă, în special în sarcinile care necesită înțelegerea spațiului fizic. În provocările care implică utilizarea instrumentelor, soluțiile GPT-3 au fost semnificativ în afara țintei.

Hongjing Lu, autorul senior al studiului, a exprimat uimirea la salturile tehnologiei din ultimii doi ani, în special în capacitatea IA de a raționa. Dar, dacă aceste modele “gândesc” cu adevărat ca oamenii sau doar imită gândirea umană, este încă subiect de dezbatere. Căutarea insight-urilor în procesele cognitive IA necesită acces la partea din spate a modelului IA, un salt care ar putea modela traiectoria viitoare a IA.

Reflectând sentimentul, Webb concluzionează: “Accesul la partea din spate a modelelor GPT ar beneficia imens cercetătorilor IA și cognitivi. În prezent, suntem limitați la intrări și ieșiri, și lipsește adâncimea decisivă pe care o aspirăm.”