在隐式自动评分数学简答题项目中运用语言模型

我们提出一种评估数学题目某些简短建构性回答的新方法。我们的方法使用一条流水线，识别学生作答中所指定的关键数值。这使我们能够判定作答的正确性，并识别任何误解。数值识别流水线的信息随后可用于向教师和学生提供反馈。该数值识别流水线由两个微调语言模型组成。第一个模型判定某数值是否在学生作答中隐式存在。第二个模型识别关键数值在作答中的具体位置。我们既考虑了可用于任意提示与数值的通用模型，也考虑了针对每个提示与数值特定的模型。相较于传统的基于量规的评分，该数值识别流水线是一种更准确且更具信息量的简短建构性作答评估方式。它可用于向学生提供更有针对性的反馈，从而帮助其提升对数学的理解。