介绍

停止测量:使用响应时间识别测试接线员脱离

9月2020年

经过:史蒂文明智Megan Kuhfeld.

描述

在全国教育委员会的本次会议上2020年虚拟会议(视频中的1:06:40),Wise博士分享了研究攻击的研究见解以及如何在得分中管理脱离。

使用成就测试有很长的传统,以评估个人的知识,技能和能力。在这种测试期间,将一系列物品管理到测试接线员,并且对每个项目的响应提供聚合以产生测试分数的信息。基于所得分数所做的推论的有效性取决于每个项目响应反映其感兴趣的构建或领域的假设取决于假设。然而,现实是,考试者有时会从他们的测试中脱离,并给出不反映他们的知识,技能和能力的反应。当使用基于计算机的测试时,可以将这些项目响应标识为快速猜测行为。

测试数据中快速猜测的存在邀请了对它们做什么的问题。在这个演示中,我们争辩说,因为快速猜测不反映一位考试者知道,并且可以做任何贡献,因此应该被排除在得分之外。这种断言基于信念,即迅速猜测物品代表测试接受者的选择,以“选择退出”测量过程。我们通过数据分析和以前的研究发现,提供证据支持此断言。统称,这种证据表明,快速猜测反映了明显不同的构建 - 无关的反应过程。此外,如果在评分中包含快速猜测,它们会引入系统的测量误差,这可能会严重扭曲得分。

查看更多

查看演示文稿

相关话题