OpenAIのChatGPTが大学の会計試験に挑む

OpenAIは最近、画期的なAIチャットボット、GPT-4を発表しました。これは、さまざまな分野で波紋を広げています。バーエクザムで90パーセントのスコアを獲得し、15のAP試験中13つに合格し、GRE Verbal試験でほぼ完璧なスコアを獲得したGPT-4のパフォーマンスは、並外れたものでした。

ブリガムヤング大学（BYU）と186の他の大学の研究者は、OpenAIの技術が会計試験でどのように機能するかを調べることにしました。彼らはオリジナルのバージョン、ChatGPTをテストし、会計分野ではまだ改善の余地があるものの、この技術は教育が提供され受け取られる方法に肯定的な影響を与えるゲームチェンジャーであると判断しました。

2022年11月のデビュー以来、ChatGPTは100万ユーザーに達する最も速い成長を示すテクノロジー・プラットフォームになりました。ChatGPTのようなAIモデルが教育における役割についての現在進行中の議論の光に、リード研究著者であるBYUの会計学教授デビッド・ウッドは、可能な限り多くの教授を募集して、AIのパフォーマンスを実際の大学の会計学生と比較することにしました。

ChatGPT vs. 学生の会計試験

この研究には、14カ国の186の教育機関から327人の共同著者が参加し、25,181のクラスルーム会計試験問題を提供しました。BYUの学部生も2,268の教科書テストバンク問題を提供しました。質問は、会計情報システム（AIS）、監査、財務会計、管理会計、税務などのさまざまな会計サブフィールドをカバーし、難易度やタイプも異なりました。

ChatGPTのパフォーマンスは印象的でしたが、学生は平均76.7%のスコアでChatGPTの47.4%を上回りました。11.3%の質問で、ChatGPTは学生の平均スコアを上回り、特にAISと監査で優れています。しかし、税務、財務、管理会計の評価では、数学的プロセスに苦労したため、苦戦しました。

ChatGPTは、真偽問題（68.7%正解）や多肢選択問題（59.5%）ではより良いパフォーマンスを示しましたが、短答問題（28.7%から39.1%）では苦労しました。一般的に、高等質問に苦労し、不正解に対して権威ある書面の説明を提供したり、同じ質問に異なる方法で答えたりしました。

教育におけるChatGPTの将来

その限界にもかかわらず、研究者はGPT-4が会計問題を改善し、発見した問題を解決することを予想しています。最も有望な側面は、チャットボットの潜在的な教え方と学び方の強化、たとえば、課題やプロジェクトの設計とテストの支援などです。

「これは混乱をもたらすものであり、ここからどこへ行くのかを評価する必要があります」と、研究の共同著者であり、BYUの会計学教授であるメリッサ・ラーソンは述べました。「もちろん、まだTAを使用しますが、これは私たちが彼らを異なる方法で使用することを強いるものです。」

AIが進化を続けるにつれて、教育者は適応し、これらのテクノロジーを教え方に新しい方法で取り入れる必要があります。