推介会

停止测量:使用响应时间识别接受测试者的脱离接触

2020年9月

经过:史蒂文·怀斯,,,,梅根·库赫菲尔德(Megan Kuhfeld)

描述

在全国教育测量委员会2020 Virtual会议的本届会议上(从视频中的1:06:40开始),Wise博士分享了研究脱离接触的研究见解以及如何在得分中进行脱离接触。

使用成就测试来评估个人的知识,技能和能力有悠久的传统。在此类测试期间,对测试者进行了一系列项目,对这些项目的响应提供了汇总的信息以产生测试分数。基于结果分数做出的推论的有效性部分取决于每个项目响应反映感兴趣的构建体或域的假设。然而,现实是,考试者有时确实会脱离测试,并提供不反映其知识,技能和能力的回答。当使用基于计算机的测试时,可以将这些项目响应识别为快速猜测行为。

测试数据中快速猜测的存在引起了如何处理它们的问题。在本演讲中,我们争辩说,由于快速猜测没有反映接受者所知道的,并且可以做出任何贡献,因此应将其排除在评分之外。这种断言是基于信念,即对项目的快速猜测代表了测试者选择“退出”测量过程的选择。我们提供了通过数据分析和先前的研究结果来支持这一主张的证据。总的来说,这一证据表明,快速猜测反映了一个明显不同的,构造的反应过程。此外,如果评分中包括快速猜测,他们会引入系统的测量错误,这些错误可能会严重扭曲分数。

查看更多

请参阅演示文稿

相关话题