认知辅助的零样本自动作文评分
计算与语言
2021-02-23 v1 人工智能
摘要
自动作文评分（AEG）是由机器对针对某一主题（称为提示语 prompt）所写文章评定分数的过程。零样本 AEG 是指我们训练一个系统，对训练数据中未出现过的、针对新提示语所写的文章进行评分。在本文中，我们描述了一种利用认知信息（以注视行为的形式）解决零样本自动作文评分问题的方法。我们的实验表明，使用注视行为有助于提升 AEG 系统的性能，尤其当我们提供一篇针对新提示语所写的文章进行评分时，QWK 平均提升近 5 个百分点。
引用
@article{arxiv.2102.11258,
title = {Cognitively Aided Zero-Shot Automatic Essay Grading},
author = {Sandeep Mathias and Rudra Murthy and Diptesh Kanojia and Pushpak Bhattacharyya},
journal= {arXiv preprint arXiv:2102.11258},
year = {2021}
}
备注
This paper was accepted for publication at ICON 2020: The 17th International Conference on Natural Language Processing, on December 20, 2021