介绍

停止测量：使用响应时间识别测试接线员脱离

9月2020年

由:史蒂文明智那Megan Kuhfeld.

描述

在全国教育委员会的本次会议上2020年虚拟会议（视频中的1:06:40），Wise博士分享了研究攻击的研究见解以及如何在得分中管理脱离。

使用成就测试有很长的传统，以评估个人的知识，技能和能力。在这种测试期间，将一系列物品管理到测试接线员，并且对每个项目的响应提供聚合以产生测试分数的信息。基于所得分数所做的推论的有效性取决于每个项目响应反映其感兴趣的构建或领域的假设取决于假设。然而，现实是，考试者有时会从他们的测试中脱离，并给出不反映他们的知识，技能和能力的反应。当使用基于计算机的测试时，可以将这些项目响应标识为快速猜测行为。

测试数据中快速猜测的存在引出了一个问题:如何处理这些猜测?在这次演讲中，我们认为，由于快速猜测不能反映考生知道什么和能做什么，它们对测量没有贡献，因此应该被排除在评分之外。这种论断是基于这样一种信念:对一个题目的快速猜测代表着测试者选择“退出”测量过程。我们通过数据分析和之前的研究发现提供证据支持这一论断。总的来说，这些证据表明，快速猜测反映了一个截然不同的、与建构无关的反应过程。此外，如果在评分中包含快速猜测，它们会引入系统性的测量误差，从而严重扭曲评分。

 查看更多

看到报告

相关的话题