中文

基于神经网络模型堆叠的自动短答案评分

计算与语言 2021-03-24 v1 机器学习

摘要

自动短答案评分是文本分类问题之一,用于在考试中自动评估学生的答案。构建自动短答案评分系统会出现若干挑战,其中之一是数据的数量与质量。数据标注过程并不容易,因为它需要领域专家的人工标注者。此外,数据不平衡过程也是一项挑战,因为正确答案的标签数量总是远少于错误答案。在本文中,我们提出使用基于神经网络和XGBoost的堆叠模型结合句子嵌入特征进行分类处理。我们还提出使用数据上采样方法来处理不平衡类别,以及使用超参数优化算法自动寻找鲁棒模型。我们使用Ukara 1.0 Challenge数据集,我们的最佳模型获得了0.821的F1分数,超过了同一数据集上的先前工作。

关键词

引用

@article{arxiv.2010.11092,
  title  = {Stacking Neural Network Models for Automatic Short Answer Scoring},
  author = {Rian Adam Rajagede and Rochana Prih Hastuti},
  journal= {arXiv preprint arXiv:2010.11092},
  year   = {2021}
}

备注

submitted to The 5th International Conference on Information Technology and Digital Applications 2020