OpenAIのChatGPTが大学の会計試験に挑戦

OpenAIは最近、画期的なAIチャットボットGPT-4を発表しました。これはさまざまな分野で話題を呼んでいます。法務試験で90パーセントル、15のAP試験中13試験に合格、GRE Verbal試験でほぼ完璧なスコアを獲得したGPT-4のパフォーマンスは、ただただ素晴らしいものでした。

ブリガムヤング大学（BYU）と186の他の大学の研究者たちは、OpenAIの技術が会計試験でどのように機能するかを知りたかったので、オリジナルのバージョン、ChatGPTをテストしました。会計の分野ではまだ改善の余地があるものの、この技術は教育が提供され、受け取られる方法に肯定的な影響を与えるゲームチェンジャーであることがわかりました。

2022年11月のデビュー以来、ChatGPTは100万ユーザーを獲得し、2ヶ月で最速成長を記録した技術プラットフォームとなりました。AIモデルであるChatGPTの教育における役割に関する現在進行中の議論の光に、リード研究者であるBYUの会計学教授デビッド・ウッドは、教授をできるだけ多く募集して、AIのパフォーマンスを実際の大学の会計学生と比較することにしました。

ChatGPT vs. 学生の会計試験

この研究には、14カ国の186の教育機関から327人の共同研究者が参加し、25,181のクラスルーム会計試験問題を提供しました。BYUの学部生も、2,268の教科書テストバンク問題を提供しました。問題は、会計情報システム（AIS）、監査、財務会計、管理会計、税金などのさまざまな会計のサブフィールドをカバーし、難易度とタイプも異なりました。

ChatGPTのパフォーマンスは印象的でしたが、学生は平均76.7%のスコアでChatGPTの47.4%を上回りました。11.3%の質問では、ChatGPTは学生の平均スコアを上回り、特にAISと監査で優れました。しかし、税金、財務、管理の評価では苦労し、数学的プロセスに対する苦手意識が原因である可能性があります。

ChatGPTは、真偽の質問（68.7%正解）や多肢選択の質問（59.5%）では良好なパフォーマンスを見せましたが、短答の質問（28.7%〜39.1%）では苦労しました。一般的に、高次の質問では、誤った答えに対する権威ある書面の説明を提供することがあったり、同じ質問に対して異なる回答を提供することがありました。

ChatGPTの教育における将来

制限があるにもかかわらず、研究者はGPT-4が会計の質問を改善し、発見した問題に対処することを予測しています。最も有望な側面は、チャットボットが教育を強化し、課題の設計とテスト、またはプロジェクトのドラフトの作成に役立つ可能性があることです。

「これは混乱をもたらすものであり、どこから始めるかを評価する必要がある」と、研究の共同著者であり、BYUの会計学教授であるメリッサ・ラーソンは述べました。「もちろん、まだTAを持っているでしょうが、これは私たちにそれらを異なる方法で使用することを強いるものです」

AIが進化を続けるにつれて、教育者は適応し、これらのテクノロジーを教育方法に新しい方法で組み込む必要があります。