一项研究显示,学生在练习阶段借助人工智能(AI)工具,短期内或许能提高答题表现,但一旦进入无法使用AI的测试环节,正确率和作答表现反而可能下滑。
据日本科技媒体Gigazine 8日(当地时间)报道,研究团队在论文《AI Assistance Reduces Persistence》中指出,AI确实能够改善学习阶段的表现,但当辅助被撤除后,学生更容易放弃作答,完成题目的意愿和能力都会减弱。
研究团队首先对354名受试者进行了分数运算测试。参与者被随机分为AI组和非AI组。整项测试共15题,前12题为难度逐步上升的练习题,最后3题为测试题。参与者可随时跳题。研究人员并未事先告知AI组,进入测试阶段后AI功能将被关闭。
结果显示,AI组在练习阶段整体表现更好,但进入测试阶段后,正确率明显下滑,跳题比例也更高;相比之下,非AI组在练习阶段与测试阶段之间的表现变化不大。研究团队据此概括称,AI可以提升练习阶段的表现,但可能削弱脱离辅助后的测试成绩。
为进一步验证这一结论,研究团队随后开展了第二轮实验,共有667人参与。整项实验包含17道题,其中前3题为预备题,用于降低个体基础能力差异带来的影响。与此同时,研究人员还在非AI组界面中设置了与AI组相同位置和样式的侧边栏,以排除页面布局差异的干扰。
第二轮实验结果与第一轮基本一致:使用AI时,受试者表现更好;但进入测试阶段后,答题表现反而转差。
研究还发现,AI的使用方式会显著影响结果。在AI组中,61%的参与者会直接向AI索取答案,而这部分人群在测试阶段的成绩下滑最为明显。相较之下,虽然同样使用AI,但主要请求提示或解题讲解的参与者,测试成绩并未明显恶化。这表明,把AI用于直接获取答案,与把AI作为辅助理解和解题的工具,最终效果并不相同。
研究团队还进一步检验,这一现象是否仅出现在数学场景中。第三轮实验采用美国大学入学考试SAT风格的阅读理解题,共有201人参与。其中第1题为预备题,第2至第6题为练习题,第7至第9题为测试题。结果显示,AI组在进入测试阶段后同样出现成绩明显下滑,且跳题比例更高。
综合三轮实验结果,研究团队给出的结论较为一致:在AI辅助下完成练习的人,一旦失去AI支持,更容易中途放弃作答,成绩也更容易恶化。论文据此认为,AI辅助可能会降低学生的答题坚持度。
研究团队指出,这一发现对教育场景中引入AI工具具有直接启示。若使用方式以快速获取答案为主,学生的实际测试表现可能受到更大负面影响;而以提示和讲解为主的使用方式,副作用相对较小。相应地,学习类AI工具的设计重点,或许不应放在直接给出答案上,而应更多强化引导解题和解释型支持。