结果是OpenAI的ChatGPT该项目能够通过MBA考试,但只是勉强通过。
宾夕法尼亚大学沃顿商学院教授Christian Terwiesch最近说测试(在新窗口打开)ChatGPT会在他自己的MBA考试中取得怎样的成绩,他给了这个人工智能程序五个样题。
最后,ChatGPT在5个问题上的得分是“B到B-”,或者勉强及格。在一个研究论文(在新窗口打开), Terwiesch回顾了人工智能程序的表现,从提供一流的答案到其他充满逻辑缺陷的答案。
例如,Terwiesch给ChatGPT在三个测试问题上打了“A+”,因为他们给出了正确答案,并对这些问题提供了简洁或出色的解释。
但在另外两个问题上,该程序得到了“C”,因为它提供了有缺陷的答案,这表明“在相对简单的计算中,Chat GPT3有时会在六年级的数学水平上犯令人惊讶的错误,”他写道。
通过研究结果,Terwiesch得出结论,ChatGPT在基本操作管理和流程分析问题上表现出色。然而,“目前的ChatGPT版本还不能处理更高级的过程分析问题,即使它们是基于相当标准的模板,”他补充道。因此,如果给出不同的、甚至更难的问题,程序可能会不及格。
尽管如此,ChatGPT已经足够强大,Terwiesch计划加入其他学校和教授的行列禁止它用于家庭作业和期末考试。但他并不认为聊天机器人会取代商务人员。
“我们有很多理由相信,随着时间的推移,技术会越来越好。但是,我们离复杂问题的A+还有很长的路要走,我们仍然需要一个人参与进来,”Terwiesch在他的论文中写道。(但具有讽刺意味的是,他表示ChatGPT可以帮助他在未来的MBA考试中编写问题,所需时间大约是通常情况下的一半。)
ChatGPT面临的另一个限制是,人工智能程序只能根据现有知识提出答案。因此,它缺乏创造人类企业家可能敢于设想的创新解决方案的创造力。同样的创造力也是教师在培养学生时应该关注的。Terwiesch补充说:“作为教育工作者,如果不要求,我们应该奖励这种打破常规的思维。”