中文

数学定位评估的多方法分析:古典方法、机器学习与聚类方法

机器学习 2025-11-07 v1

摘要

本研究采用多方法框架结合古典测试理论、机器学习和无监督聚类,对198名学生接受的40题数学定位考试进行评估。古典测试理论分析显示,55%的题目实现优秀的项目判别能力(D0.40D \geq 0.40),而30%的题目表现较差(D<0.20D < 0.20),需要更换。题目6(图形解释)成为考试中最强的判别题,判别系数达到完美(D=1.000D = 1.000),ANOVA F 统计量最高(F=4609.1F = 4609.1),随机森林特征重要性最高(0.206),占预测能力的20.6%。机器学习算法表现卓越,随机森林和梯度提升分别实现了97.5%和96.0%的交叉验证准确率。K-means聚类识别出一种自然的二元 competency 结构,边界位于42.5%,与机构阈值55%存在差异,表明可能存在过度分类到补习类别的倾向。两种聚类方案表现出卓越的稳定性(bootstrap ARI = 0.855),下层簇具有完美的纯净度。跨方法的一致性证据支持具体的改进措施:替换劣质判别题目、实施两阶段评估、并整合随机森林预测及透明度机制。这些发现表明,多方法集成为基于证据的数学定位优化提供了稳健的实证基础。

关键词

引用

@article{arxiv.2511.04667,
  title  = {Multi-Method Analysis of Mathematics Placement Assessments: Classical, Machine Learning, and Clustering Approaches},
  author = {Julian D. Allagan and Dasia A. Singleton and Shanae N. Perry and Gabrielle C. Morgan and Essence A. Morgan},
  journal= {arXiv preprint arXiv:2511.04667},
  year   = {2025}
}

备注

28 pages, 8 table, 4figures, NAM conference