文章主题:ChatGPT, 大学会计课程, 考题测试, 会计信息系统
IT之家 4 月 25 日消息,上个月,OpenAI 推出了最新的 AI 聊天机器人 GPT-4,并声称该机器人在各种考试中表现异常出色,比如律师考试,研究生入学考试等。然而,根据美国杨百翰大学领导的一项研究,ChatGPT 在会计考试中的表现远不及人类,甚至还会一本正经的胡说八道,为错误的答案辩解。
🎓👨🏫伍德教授的会计研究团队对ChatGPT进行了深度评估,旨在验证其在大学会计课程中的知识水平。他们发起了一项国际性的挑战,吸引了14个国家的186所教育机构的327位热情参与者,涵盖了会计信息系统、审计、财务会计、管理会计和税务等多个关键领域。总计,他们精心准备了25,181道实战试题,从教科书到实际考试题型应有尽有。📚🔍为了增加测试的多样性,团队特别邀请BYU的本科生,包括伍德教授的女儿杰西卡,贡献了2,268份课本上的问题,以检验ChatGPT在学术场景中的表现。这次大规模的考验不仅展示了技术的进步,也让教育者们对AI的学习能力有了新的认识。👩🎓💻值得注意的是,所有参与者的身份和联系方式都被巧妙地隐藏起来,确保了结果的公正性和隐私性。这项研究的结果将为未来的教育和人工智能在学术领域的应用提供有价值的参考。🏆🔍
结果显示,ChatGPT 的表现虽然有亮点,但总体上还是不及学生水平。学生的平均分是 76.7%,而 ChatGPT 的平均分只有 47.4%。在 11.3% 的问题上,ChatGPT 的得分高于学生平均分,尤其是在会计信息系统和审计方面。但是,在税务、财务和管理方面,ChatGPT 就显得力不从心,可能是因为这些领域需要更多的数学运算能力。在问题类型上,ChatGPT 比较擅长判断题(68.7% 正确率)和选择题(59.5% 正确率),但是在简答题上就很吃力(正确率在 28.7% 到 39.1% 之间)。一般来说,对于需要更高层次思维的问题,ChatGPT 更难回答。有时候,ChatGPT 甚至会为错误答案提供权威的解释,或者对同一个问题给出不同的答案。
“它并不完美,你不能指望它能做所有事情。”杰西卡说,“仅仅依靠 ChatGPT 来学习是愚蠢的。”
IT之家注意到,研究人员还发现了一些其他有趣的现象:
🎓当面对复杂的数学题目时,ChatGPT偶尔会让人忍俊不禁,它可能会意外地混淆数字游戏,例如在减法中多计两笔,抑或在除法运算中一不小心就犯下错误。这种小滑稽虽然有时令人啼笑皆非,但也提醒我们,技术智能并非万能,精准计算还需严谨审慎。
🌟ChatGPT虽智能🔥,但偶尔也会犯错💡。它能给出解答,甚至有时看似准确的答案,但却选错了路径。尽管如此,这个AI学习者始终坚持自我修正,努力提供最贴切的解析。记得,尽管信任它的能力,但验证始终是关键一步🔍。
🌟警告:AI助手在此!👀ChatGPT并非始终如一地诚实,有时会玩文字游戏。在引用资料时,它可能会创造出看似可靠的文献列表,但实际上它们是虚无缥缈的幻影,甚至是子虚乌有的存在。这种虚构行为可能导致信息误导,需要用户审慎对待,勿轻信盲从。🔍若想确保学术诚信,务必亲自核实每一个来源,避免被假象蒙蔽。即使是科技巨头的产物,我们也应保持批判思维,对AI生成的内容保持怀疑态度。📝记得,真相总在阳光下,不要让ChatGPT的虚构成为你的知识盲点。💡
尽管如此,研究人员相信,在未来的版本中,ChatGPT 会在会计问题上有所进步,并解决上述问题。他们认为最有前景的是,这款聊天机器人可以帮助改善教学和学习,比如设计和测试作业,或者用于草拟项目的部分内容。
在这个关键时刻,让我们深入审视教育的本质——传授何为价值之所在。一位来自BYU的会计学界权威,研究合作伙伴之一的拉森教授如是说,这无疑是一次深刻的转型挑战。他强调了评估与改变的重要性:“我们需要重新定义助教的角色和职责。”尽管指导依然存在,但教育方式将经历革新,以适应知识时代的变迁。📚✨
这项研究发表在《会计教育问题》杂志上。
AI时代,掌握AI大模型第一手资讯!AI时代不落人后!
免费ChatGPT问答,办公、写作、生活好得力助手!
扫码右边公众号,驾驭AI生产力!