DECOR:面向 L2 英语写作的连贯性改进基准:不连贯检测、推理与重写
计算与语言
2024-10-04 v2
摘要
写作连贯性是二语(L2)英语学习者常困扰的方面,在评估 L2 英语写作中至关重要。现有自动写作评估系统主要使用基本的表层语言特征来检测写作中的连贯性。然而,很少有研究致力于纠正检测到的不连贯问题,这对寻求改进写作的 L2 语言学习者具有显著的帮助价值。为弥合这一差距,我们引入 DECOR,一个包括专家注释的新型基准,用于检测 L2 英语写作中的不连贯、识别其背后的原因以及进行重写。我们了解为首个专为改进 L2 英语写作而设计的连贯性评估数据集,特点是原始不连贯句子与其专家重写版本的配对。此外,我们微调模型以自动检测和重写学生作文中的不连贯。我们发现,在微调期间融入不连贯的具体原因可持续地提高重写质量,无论是自动评估还是人类评估都获得了受欢迎的结果。
引用
@article{arxiv.2406.19650,
title = {DECOR: Improving Coherence in L2 English Writing with a Novel Benchmark for Incoherence Detection, Reasoning, and Rewriting},
author = {Xuanming Zhang and Anthony Diaz and Zixun Chen and Qingyang Wu and Kun Qian and Erik Voss and Zhou Yu},
journal= {arXiv preprint arXiv:2406.19650},
year = {2024}
}
备注
EMNLP 2024 Main, 23 pages, 5 figures, 20 tables