OpenAI’s ChatGPT affronta gli esami di contabilità universitari

OpenAI ha recentemente lanciato il suo rivoluzionario chatbot AI, GPT-4, che ha fatto scalpore in vari campi. Con un punteggio del 90° percentile all’esame di avvocato, superando 13 su 15 esami AP e ottenendo un punteggio quasi perfetto al test GRE Verbal, le prestazioni di GPT-4 sono state nulla short di straordinarie.

I ricercatori dell’Università di Brigham Young (BYU) e di altre 186 università erano curiosi di scoprire come la tecnologia di OpenAI si sarebbe comportata negli esami di contabilità. Hanno testato la versione originale, ChatGPT, e hanno scoperto che, sebbene ci sia ancora spazio per il miglioramento nel dominio della contabilità, la tecnologia è un fattore di cambiamento che avrà un impatto positivo sul modo in cui l’istruzione viene erogata e ricevuta.

Dal suo debutto nel novembre 2022, ChatGPT è diventato la piattaforma tecnologica in più rapida crescita, raggiungendo 100 milioni di utenti in meno di due mesi. Alla luce del dibattito in corso sul ruolo dei modelli di intelligenza artificiale come ChatGPT nell’istruzione, l’autore principale dello studio, David Wood, professore di contabilità alla BYU, ha deciso di reclutare quanti più professori possibile per valutare le prestazioni dell’AI rispetto a quelle degli studenti universitari di contabilità.

ChatGPT vs. studenti negli esami di contabilità

La ricerca ha coinvolto 327 coautori di 186 istituzioni educative in 14 paesi, che hanno contribuito con 25.181 domande di esami di contabilità in classe. Gli studenti undergraduate della BYU hanno inoltre fornito 2.268 domande di test da un testo di contabilità. Le domande hanno coperto vari sottocampi della contabilità, come sistemi di informazione contabile (AIS), revisione, contabilità finanziaria, contabilità gestionale e tasse. Hanno anche variato per difficoltà e tipo.

Sebbene le prestazioni di ChatGPT siano state impressionanti, gli studenti hanno superato l’AI, con un punteggio medio del 76,7% rispetto al 47,4% di ChatGPT. Nel 11,3% delle domande, ChatGPT ha ottenuto un punteggio più alto della media degli studenti, in particolare eccellendo in AIS e revisione. Tuttavia, ha avuto difficoltà con le valutazioni fiscali, finanziarie e gestionali, forse a causa della sua difficoltà con i processi matematici.

ChatGPT ha ottenuto risultati migliori nelle domande a vero/falso (68,7% corrette) e nelle domande a scelta multipla (59,5%), ma ha avuto difficoltà con le domande a risposta breve (28,7% – 39,1%). In generale, ha avuto difficoltà con le domande di ordine superiore, a volte fornendo descrizioni scritte autorevoli per risposte errate o rispondendo alla stessa domanda in modi diversi.

Il futuro di ChatGPT nell’istruzione

Nonostante le sue limitazioni, i ricercatori prevedono che GPT-4 migliorerà le prestazioni nelle domande di contabilità e affronterà i problemi che hanno scoperto. L’aspetto più promettente è il potenziale del chatbot per migliorare l’insegnamento e l’apprendimento, ad esempio aiutando a progettare e testare compiti o a stendere parti di un progetto.

“Questo è un cambiamento, e dobbiamo valutare dove andare da qui”, ha detto l’autore dello studio e fellow professore di contabilità alla BYU, Melissa Larson. “Naturalmente, avrò ancora i TA, ma questo ci costringerà a utilizzarli in modi diversi.”

Man mano che l’intelligenza artificiale continua a progredire, gli educatori devono adattarsi e trovare nuovi modi per incorporare queste tecnologie nei loro metodi di insegnamento.