从真实考试中为阅读理解题生成干扰项

我们研究从考试的单项选择题阅读理解中生成干扰项的任务。与以往所有工作不同，我们不以准备单词或短短语干扰项为目标，而是努力生成更长且语义丰富的干扰项，其更接近于真实阅读考试中题目的干扰项。以一篇阅读理解文章、一对问题及其正确选项作为输入，我们的目标是生成若干干扰项，它们在某种程度上与答案相关、与问题的语义上下文一致，并在文章中有迹可循。我们提出一种带静态与动态注意力机制的层次化编码器-解码器框架来解决该任务。具体而言，动态注意力能在每个循环时间步结合句子级与词级注意力，以生成更具可读性的序列。静态注意力用于调节动态注意力，使其不聚焦于与问题无关的句子或促成正确选项的句子。我们提出的框架在首个真实阅读理解题干扰项生成数据集上优于若干强基线。在人工评价中，与基线生成的干扰项相比，我们生成的干扰项更能有效地迷惑标注者。