ISSR：用于词汇测试干扰项生成的迭代选择与自我审阅
计算与语言
2025-01-08 v1
摘要
词汇掌握是第二语言学习的基础，因为它支撑了所有核心语言技能。准确的词汇评估在标准化考试中尤为重要，因为测试项目评估学习者对单词的理解及其在语境中的使用。以往的研究探索了生成干扰项的方法以辅助英语词汇测试设计，但现有方法常依赖词典或预定义规则，生成的干扰项可能引入多个正确选项，导致问题失效。本研究聚焦于台湾大学入学考试的英语词汇题目，分析学生响应分布以洞察这些测试项目的特征，为后续研究提供参考。此外，我们识别了大型语言模型 (LLM) 在教师生成词汇测试干扰项方面的关键局限性。为此，我们提出了迭代选择与自我审阅 (ISSR) 框架，利用新颖的 LLM 自我审阅机制确保干扰项的有效性，同时提供多样化的选项。实验结果表明，ISSR 在生成合理干扰项方面表现优异，自我审阅机制有效筛选出可能导致问题失效的干扰项。
引用
@article{arxiv.2501.03462,
title = {ISSR: Iterative Selection with Self-Review for Vocabulary Test Distractor Generation},
author = {Yu-Cheng Liu and An-Zi Yen},
journal= {arXiv preprint arXiv:2501.03462},
year = {2025}
}