OpenAI’s ChatGPT affronta gli esami di contabilità universitari

OpenAI ha recentemente lanciato il suo rivoluzionario chatbot AI, GPT-4, che ha fatto scalpore in vari campi. Con un punteggio del 90° percentile all’esame di avvocatura, superando 13 su 15 esami AP e ottenendo un punteggio quasi perfetto al test GRE Verbal, le prestazioni di GPT-4 sono state nulla short di straordinarie.

I ricercatori dell’Università di Brigham Young (BYU) e di altre 186 università erano curiosi di scoprire come la tecnologia di OpenAI si sarebbe comportata agli esami di contabilità. Hanno testato la versione originale, ChatGPT, e hanno scoperto che, sebbene ci sia ancora spazio per il miglioramento nel dominio della contabilità, la tecnologia è un fattore di cambiamento che avrà un impatto positivo sul modo in cui l’istruzione viene impartita e ricevuta.

Dal suo debutto nel novembre 2022, ChatGPT è diventato la piattaforma tecnologica a crescita più rapida di tutti i tempi, raggiungendo 100 milioni di utenti in meno di due mesi. Alla luce del dibattito in corso sul ruolo dei modelli di intelligenza artificiale come ChatGPT nell’istruzione, l’autore principale dello studio, David Wood, professore di contabilità alla BYU, ha deciso di reclutare quanti più professori possibile per valutare le prestazioni dell’AI rispetto a quelle degli studenti universitari di contabilità.

ChatGPT vs. studenti negli esami di contabilità

La ricerca ha coinvolto 327 coautori di 186 istituzioni educative in 14 paesi, che hanno contribuito con 25.181 domande di esami di contabilità in aula. Gli studenti undergraduate della BYU hanno inoltre fornito 2.268 domande di test da banche di dati di testi. Le domande coprivano vari sottocampi della contabilità, come sistemi di informazione contabile (AIS), revisione, contabilità finanziaria, contabilità gestionale e tasse. Varie anche per difficoltà e tipo.

Sebbene le prestazioni di ChatGPT siano state impressionanti, gli studenti hanno superato l’AI, con un punteggio medio del 76,7% rispetto al 47,4% di ChatGPT. Nel 11,3% delle domande, ChatGPT ha ottenuto un punteggio più alto della media degli studenti, in particolare eccellendo in AIS e revisione. Tuttavia, ha avuto difficoltà con le valutazioni fiscali, finanziarie e gestionali, forse a causa della sua difficoltà con i processi matematici.

ChatGPT ha ottenuto migliori risultati alle domande vere/false (68,7% corrette) e alle domande a scelta multipla (59,5%), ma ha avuto difficoltà con le domande a risposta breve (28,7% al 39,1%). In generale, ha avuto difficoltà con le domande di ordine superiore, a volte fornendo descrizioni scritte autorevoli per risposte errate o rispondendo alla stessa domanda in modi diversi.

Il futuro di ChatGPT nell’istruzione

Nonostante i suoi limiti, i ricercatori prevedono che GPT-4 migliorerà sulle domande di contabilità e affronterà le questioni che hanno scoperto. L’aspetto più promettente è il potenziale del chatbot per migliorare l’insegnamento e l’apprendimento, come ad esempio aiutare a progettare e testare compiti o stendere parti di un progetto.

“Questo è un fattore di cambiamento e dobbiamo valutare dove andare da qui”, ha detto la coautrice dello studio e fellow professore di contabilità alla BYU Melissa Larson. “Certo, avrò ancora TA, ma questo mi costringerà a utilizzarli in modi diversi”.

Man mano che l’intelligenza artificiale continua ad avanzare, gli educatori devono adattarsi e trovare nuovi modi per incorporare queste tecnologie nei loro metodi di insegnamento.