OpenAI’s ChatGPT Преодолевает Университетские Экзамены По Бухгалтерскому Учету

OpenAI недавно запустила свою революционную чат-бот AI, GPT-4, который уже произвел фурор в различных областях. С результатом в 90-м процентиле на экзамене на адвоката, сдав 13 из 15 экзаменов AP и набрав почти идеальный балл на тесте GRE Verbal, результаты GPT-4 были просто невероятными.

Исследователи из Университета Бригама Янга (BYU) и еще 186 университетов были заинтересованы в том, как технология OpenAI будет работать на экзаменах по бухгалтерскому учету. Они протестировали оригинальную версию, ChatGPT, и обнаружили, что хотя еще есть место для улучшения в области бухгалтерского учета, эта технология является игроком, который изменит способ доставки и восприятия образования.

С момента своего дебюта в ноябре 2022 года ChatGPT стал самой быстрорастущей технологической платформой, достигнув 100 миллионов пользователей менее чем за два месяца. В свете продолжающихся дебатов о роли моделей AI, таких как ChatGPT, в образовании, ведущий автор исследования, Дэвид Вуд, профессор бухгалтерского учета BYU, решил привлечь как можно больше профессоров для оценки производительности AI по сравнению с реальными студентами университета.

ChatGPT vs. Студенты на Экзаменах по Бухгалтерскому Учету

Исследование включало 327 соавторов из 186 образовательных учреждений из 14 стран, которые внесли 25 181 вопрос экзамена по бухгалтерскому учету. Студенты BYU также предоставили 2 268 вопросов из банка тестовых вопросов. Вопросы охватывали различные подполки бухгалтерского учета, такие как системы бухгалтерского учета (AIS), аудит, финансовый учет, управленческий учет и налоги. Они также различались по уровню сложности и типу.

Хотя результаты ChatGPT были впечатляющими, студенты превзошли AI, набрав в среднем 76,7% против 47,4% у ChatGPT. На 11,3% вопросов ChatGPT набрал больше баллов, чем студенты в среднем, особенно отличившись в AIS и аудите. Однако он испытывал трудности с налоговыми, финансовыми и управленческими оценками, возможно, из-за трудностей с математическими процессами.

ChatGPT показал лучшие результаты на вопросах с TRUE/FALSE (68,7% правильных ответов) и вопросах с несколькими вариантами ответов (59,5%), но испытывал трудности с вопросами с короткими ответами (28,7% до 39,1%). Он в целом испытывал трудности с вопросами более высокого порядка, иногда предоставляя авторитетные письменные описания для неправильных ответов или отвечая на один и тот же вопрос по-разному.

Будущее ChatGPT в Образовании

Несмотря на свои ограничения, исследователи полагают, что GPT-4 улучшит результаты на вопросах по бухгалтерскому учету и устранит обнаруженные проблемы. Самым перспективным аспектом является потенциал чат-бота для улучшения преподавания и обучения, например, помогая проектировать и тестировать задания или создавать части проекта.

“Это разрушение, и нам нужно оценить, куда мы движемся отсюда”, – сказала соавтор исследования и коллега профессора бухгалтерского учета BYU Мелисса Ларсон. “Конечно, я все еще буду иметь ассистентов, но это заставит нас использовать их по-разному.”

По мере того, как AI продолжает развиваться, педагогам необходимо адаптироваться и находить новые способы включения этих технологий в свои методы преподавания.