杂志文章

使用评估元数据来量化测试脱离接触对教育有效性估计的影响

2019

经过:梅根·库赫菲尔德(Megan Kuhfeld),,,,詹姆斯·索兰(James Soland)


抽象的

教育利益相关者早就知道,参加成就测试时可能不会完全参与,并且这种脱离接触可能会破坏从观察到的分数中得出的推论。得益于基于计算机的测试的越来越流行以及它们生产的新形式的元数据形式,研究人员已经制定了使用项目响应时间来识别对可能与可能不接触的项目的响应的验证程序。在这项研究中,我们研究了两种技术对测试脱离接触的影响 - (a)从样本中删除未参与的测试者,以及(b)调整测试分数以消除迅速猜测的项目 - 估计对学生成长,成就的贡献,差距和夏季学习损失。我们的结果表明,从样本中删除脱离接触的考生可能会引起估计值的偏见,尽管整体上,脱离接触的总体会计对我们检查的指标的影响最小。最后,我们为政策制定者和评估人员提供指导,以了解其自己的工作中的脱离接触,并考虑使用成就测试元数据出于相关目的的承诺和局限性。

看更多

查看期刊文章

本文在NWEA外发表。全文可以在上面的链接上找到。


相关话题