研究人员发现,无人监督的在线考试产生的分数与现场考试非常相似,表明作弊很少或无效,并支持在线评估的有效性和可靠性。尽管存在这些担忧,但不同学科和水平的一致结果鼓励了在线考试的继续,尽管教授们仍然保持谨慎,实施了进一步遏制作弊的策略。
当爱荷华州立大学在2020年春季中期从面对面学习过渡到远程学习时,心理学教授杰森·陈(Jason Chan)很担心。无人监督的在线考试会引发猖獗的作弊行为吗?
当测试结果滚滚而来时,他最初的反应变成了惊讶。个别学生的分数略高,但与现场监考的结果一致。尽管个别学生的成绩略有提高,但他们与之前面对面监督的考试成绩保持一致。在新冠肺炎疫情封锁之前,得分为B的学生在无人监督的在线测试环境中仍在获得B。这种模式适用于评分等级高低的学生。
陈教授说:“事实上,无论是参加现场考试还是在线考试,学生的排名基本保持不变,这表明作弊要么不普遍,要么对显著提高分数无效。”
为了了解这种情况是否在更广泛的层面上发生,陈和心理学博士候选人Dahwi Ahn分析了2020年春季学期18个班级近2000名学生的考试成绩数据。他们的样本范围从大型讲座式课程(如《统计学概论》)到工程学和兽医学的高级课程。
研究人员发现,在不同的学科、班级规模、课程水平和考试风格(即以选择题或简答题为主)中,结果都是一样的。无人监督的在线考试产生的分数与面对面的有监考的考试非常相似,这表明它们可以为学生的学习提供有效和可靠的评估。
这项研究结果最近发表在《美国国家科学院院刊》上。
爱荷华州立大学分子生物学大楼内,学生们在“基因库”上方用笔记本电脑工作,这是安德鲁·莱斯特(Andrew Leicester)制作的马赛克瓷砖。图片来源:Christopher Gannon/爱荷华州立大学
“在进行这项研究之前,我对在线和无人监考的考试持怀疑态度,如果有面对面考试的选择,我很犹豫要不要使用它们。但看到这些数据后,我觉得更有信心了,希望其他教练也能这样。”
两位研究人员都表示,他们继续在网上进行考试,甚至是面对面的课程。陈说,这种形式为有兼职工作或为了体育和课外活动而旅行的学生提供了更大的灵活性。它还扩展了远程教学的选择。今年夏天,Ahn教授了她的第一个在线课程。
为什么作弊对考试成绩的影响微乎其微?
研究人员表示,更容易作弊的学生可能在课堂上表现不佳,担心不及格。也许他们逃课了,学习进度落后了,或者不愿意寻求帮助。即使在无人监督的考试中,学生们可以选择在谷歌上搜索,但如果他们不理解考试内容,他们可能很难找到正确答案。在他们的论文中,研究人员指出了之前比较开卷和闭卷考试成绩的研究证据。
另一个可能阻止作弊的因素是学术诚信或公平感,这是许多学生所看重的,陈教授说。那些努力学习并对自己的成绩感到自豪的人可能更倾向于保护他们的考试答案,不让他们认为是白吃白喝的学生知道。
尽管如此,研究人员表示,教师应该意识到无人监督的在线考试的潜在弱点。例如,一些平台可以在学生选择多项选择后立即显示正确答案。这使得学生更容易在小组文本中分享答案。
为了应对这种和其他形式的作弊,教师可以:
等到考试窗口关闭后再发布考试答案。使用较大的随机题库。在多项选择题中增加更多的选项,让正确的选择不那么明显。调整品位截止值。COVID-19和ChatGPT
Chan和Ahn表示,2020年春季学期为研究在线考试对学生评估的有效性提供了一个独特的机会。然而,也有一些限制。例如,目前尚不清楚压力和其他与covid -19相关的影响可能对学生、教师和助教起到了什么作用。也许老师对评分更宽容,或者给学生更长的时间来完成考试。
研究人员说,另一个限制是不知道样本中的18门课是随着学期的进展而变得更容易还是更难。在一个理想的实验中,一半的学生会在学期的上半学期参加在线考试,下半学期参加面对面考试。
他们试图解释这两个问题,方法是查看18个班级中一个子集的旧考试成绩数据,这些数据是在他们完全面对面的学期中获得的。研究人员发现,每个班级的成绩分布与2020年春季学期一致,并得出结论,该学期上半学期和下半学期涵盖的材料在难度上没有区别。
在本研究收集数据时,ChatGPT对学生是不可用的。然而,研究人员承认,人工智能写作工具是教育领域的游戏规则改变者,可能会使教师更难评估学生。随着ChatGPT的出现,教师应该如何处理在线考试是Ahn打算研究的问题。
参考文献:“无人监考的在线考试为学生的学习提供了有意义的评估”,作者Jason C. K. Chan和Dahwi Ahn, 2023年7月24日,美国国家科学院院刊。DOI: 10.1073 / pnas.2302020120
这项研究得到了美国国家科学基金会学习和增强智能科学基金的支持。