OpenAI’s ChatGPT Tackler Universitetsregnskapsprøver

OpenAI har nylig lansert sin banebrytende AI-chatbot, GPT-4, som har skapt bølger i ulike felt. Med en 90. percentil score på advokatprøven, bestått 13 av 15 AP-prøver og nær perfekt score på GRE Verbal-testen, har GPT-4s prestasjon vært ikke mindre enn ekstraordinær.

Forskere ved Brigham Young University (BYU) og 186 andre universiteter var nysgjerrige på hvordan OpenAIs teknologi ville fungere på regnskapsprøver. De testet den originale versjonen, ChatGPT, og fant at selv om det fortsatt er rom for forbedring i regnskapsdomenet, er teknologien en game-changer som vil påvirke måten utdanning leveres og mottas på en positiv måte.

Siden debuten i november 2022 har ChatGPT blitt den raskest voksende teknologiplattformen noensinne, med 100 millioner brukere på under to måneder. I lys av den pågående debatten om rollen til AI-modeller som ChatGPT i utdanning, bestemte hovedforsker og BYU-regnskapsprofessor David Wood seg for å rekruttere så mange professorer som mulig for å vurdere AIens prestasjon mot faktiske universitetsregnskapsstudenter.

ChatGPT vs. Studenter på Regnskapsprøver

Forskningen involverte 327 medforfattere fra 186 utdannelsesinstitusjoner i 14 land, som bidro med 25 181 klasseromregnskapsprøvespørsmål. BYU-studenter leverte også 2 268 læreboktestbankspørsmål. Spørsmålene dekket ulike regnskapsubfelt, som regnskapsinformasjonssystemer (AIS), revisjon, finansiell regnskap, ledelsesregnskap og skatt. De varierte også i vanskelighetsgrad og type.

Selv om ChatGPTs prestasjon var imponerende, gjorde studentene bedre, med en gjennomsnittlig score på 76,7 % sammenlignet med ChatGPTs 47,4 %. På 11,3 % av spørsmålene scoret ChatGPT høyere enn studentens gjennomsnitt, særlig i AIS og revisjon. Men det hadde vanskeligheter med skatte-, finansiell- og ledelsesvurderinger, kanskje på grunn av vanskelighetene med matematiske prosesser.

ChatGPT fungerte bedre på sanntallspørsmål (68,7 % riktige) og flervalgspørsmål (59,5 %), men hadde vanskeligheter med kort-svarspørsmål (28,7 % til 39,1 %). Det hadde generelt vanskeligheter med høyere-orden-spørsmål, og ga noen ganger autoritative skriftlige beskrivelser for feil svar eller svarte på samme spørsmål på ulike måter.

ChatGPTs Fremtid i Utdanning

Til tross for begrensningene, forventer forskerne at GPT-4 vil forbedre seg på regnskapsprøver og løse problemene de oppdaget. Det mest lovende aspektet er chatbotens potensiale til å forbedre undervisning og læring, som å hjelpe med å designe og teste oppgaver eller utkast til deler av et prosjekt.

“Dette er en disruptor, og vi må vurdere hvor vi går fra her,” sa medforfatter og fellow BYU-regnskapsprofessor Melissa Larson. “Selvfølgelig vil jeg fortsatt ha TAs, men dette vil tvinge oss til å bruke dem på ulike måter.”

Så lenge AI fortsetter å utvikle seg, må utdannere tilpasse seg og finne nye måter å inkorporere disse teknologiene i sine undervisningsmetoder.