瑞典学业资格考试情境下的最优项目校准
统计方法学
2024-12-31 v2
摘要
大规模成就测试需要拥有用于未来测试的项目库。在项目被纳入库之前，需要估计其特征。估计项目特征的过程称为项目校准。对于未来成就测试的质量至关重要，必须妥善进行校准，并且以最高效的方式估计项目特征。已发展出最优设计方法，以分配最合适能力值的校准项目。理论证据表明，使用能力依赖的分配具有优势。然而，尚不清楚这些理论结果在实际测试情境中是否成立。本文探讨了在瑞典学业资格考试（SweSAT）情境下，能力依赖的最优分配的性能，并量化了使用最优分配所带来的收益。对于所有项目的平均而言，我们看到校准精度的改进。虽然这种平均改进适度，但我们能够识别该方法对何种类型的项目效果良好。这有助于针对特定项目类型进行最优校准。我们还讨论了该方法的改进可能性。
引用
@article{arxiv.2410.09808,
title = {Optimal item calibration in the context of the Swedish Scholastic Aptitude Test},
author = {Jonas Bjermo and Ellinor Fackle Fornius and Frank Miller},
journal= {arXiv preprint arXiv:2410.09808},
year = {2024}
}