不可比之物：选择题考试中修改答案的因果效应
应用统计
2019-10-16 v4
摘要
考生在参加选择题考试时修改答案的行为是有益还是有害，是教育与心理测量文献中一个长期存在的谜题。本文使用潜在结果框架将问题形式化，表明比较“由错改对”和“由对改错”答案修改模式比例的传统方法——该方法近来受到 van der Linden、Jeon 和 Ferrara（2011）的批评——确实能正确识别平均答案修改效应的符号，但仅针对那些实际修改了初始作答的考生。这一子群效应被称为处理组上的平均处理效应（ATT），且通常不同于未处理组上的平均处理效应（ATU），即那些未修改初始作答的人。通过分析两个真实数据集，包括 van der Linden 等人（2011）备受争议的数据，本文发现答案修改的 ATT 为正而答案修改的 ATU 为负，因此关于答案修改效应的争论可轻易化解。本文还表明答案修改与答案复查是两种不同的处理，且了解答案修改效应对预测答案复查效应并无帮助。
引用
@article{arxiv.1808.10577,
title = {Apples to Oranges: Causal Effects of Answer Changing in Multiple-Choice Exams},
author = {Yongnam Kim},
journal= {arXiv preprint arXiv:1808.10577},
year = {2019}
}