面向基于理论的论证质量评估的领域多样化语料库构建
计算与语言
2020-11-04 v1
摘要
论证质量（AQ）的计算模型主要聚焦于评估论证的整体质量或单一特定特征，如说服力或清晰度。然而，已有工作指出，基于论证理论维度的评估可惠及写作者，但此类模型的开发受限于标注数据的缺乏。本工作中，我们描述了GAQCorpus，首个大规模的、领域多样化的基于理论的AQ标注语料库。我们讨论了如何设计标注任务以通过众包可靠收集大量判断，制定基于理论的指南，使AQ的主观判断更为客观。我们展示了如何为三个不同领域识别论证并调整标注任务。我们的工作将为指导基于理论的论证标注研究提供支持，并助力创建更多样化的语料库以支撑计算化AQ评估。
引用
@article{arxiv.2011.01589,
title = {Creating a Domain-diverse Corpus for Theory-based Argument Quality Assessment},
author = {Lily Ng and Anne Lauscher and Joel Tetreault and Courtney Napoles},
journal= {arXiv preprint arXiv:2011.01589},
year = {2020}
}
备注
accepted for ArgMining 20