OpenAI’s ChatGPT aborda los exámenes de contabilidad universitaria

OpenAI lanzó recientemente su revolucionario chatbot de IA, GPT-4, que ha estado haciendo olas en varios campos. Con una puntuación del percentil 90 en el examen de barra, aprobando 13 de 15 exámenes de AP y obteniendo una puntuación casi perfecta en la prueba verbal del GRE, el rendimiento de GPT-4 ha sido nada menos que extraordinario.

Investigadores de la Universidad Brigham Young (BYU) y 186 otras universidades estaban curiosos sobre cómo funcionaría la tecnología de OpenAI en los exámenes de contabilidad. Probaron la versión original, ChatGPT, y encontraron que, aunque todavía hay espacio para mejorar en el dominio de la contabilidad, la tecnología es un cambio de juego que impactará positivamente la forma en que se entrega y recibe la educación.

Desde su debut en noviembre de 2022, ChatGPT se ha convertido en la plataforma de tecnología de crecimiento más rápido, alcanzando 100 millones de usuarios en menos de dos meses. A la luz del debate en curso sobre el papel de los modelos de IA como ChatGPT en la educación, el autor principal del estudio, David Wood, profesor de contabilidad de BYU, decidió reclutar a tantos profesores como fuera posible para evaluar el rendimiento de la IA en comparación con los estudiantes de contabilidad universitarios reales.

ChatGPT vs. Estudiantes en exámenes de contabilidad

La investigación involucró a 327 coautores de 186 instituciones educativas de 14 países, que contribuyeron con 25,181 preguntas de exámenes de contabilidad de clase. Los estudiantes de pregrado de BYU también proporcionaron 2,268 preguntas de banco de pruebas de libro de texto. Las preguntas cubrieron varios subcampos de contabilidad, como sistemas de información de contabilidad (AIS), auditoría, contabilidad financiera, contabilidad administrativa y impuestos. También variaron en dificultad y tipo.

Aunque el rendimiento de ChatGPT fue impresionante, los estudiantes superaron a la IA, con una puntuación promedio del 76.7% en comparación con el 47.4% de ChatGPT. En el 11.3% de las preguntas, ChatGPT obtuvo una puntuación más alta que la media de los estudiantes, particularmente destacándose en AIS y auditoría. Sin embargo, tuvo dificultades con las evaluaciones de impuestos, financieras y administrativas, posiblemente debido a su dificultad con los procesos matemáticos.

ChatGPT se desempeñó mejor en preguntas de verdadero/falso (68.7% correctas) y preguntas de opción múltiple (59.5%), pero tuvo dificultades con preguntas de respuesta corta (28.7% a 39.1%). En general, luchó con preguntas de orden superior, a veces proporcionando descripciones escritas autorizadas para respuestas incorrectas o respondiendo la misma pregunta de diferentes maneras.

El futuro de ChatGPT en la educación

A pesar de sus limitaciones, los investigadores anticipan que GPT-4 mejorará en las preguntas de contabilidad y abordará los problemas que descubrieron. El aspecto más prometedor es el potencial del chatbot para mejorar la enseñanza y el aprendizaje, como ayudar a diseñar y probar tareas o redactar partes de un proyecto.

“Esto es una disruptión, y debemos evaluar hacia dónde vamos desde aquí”, dijo la coautora del estudio y profesora de contabilidad de BYU, Melissa Larson. “Por supuesto, todavía tendré asistentes de enseñanza, pero esto me obligará a utilizarlos de maneras diferentes.”

A medida que la IA continúa avanzando, los educadores deben adaptarse y encontrar nuevas formas de incorporar estas tecnologías en sus métodos de enseñanza.