中文

Quirk 还是 Palmer:基于标注数据集的情态动词框架比较研究

计算与语言 2022-12-21 v1

摘要

情态动词,如“can”、“may”和“must”,在日常交流中常用于传达说话者关于命题可能性和/或方式的观点。根据使用方式和句子上下文(例如“They 'must' help each other out.”与“They 'must' have helped each other out.”),它们的含义可能有很大差异。尽管情态动词在自然语言理解中具有实际重要性,语言学家尚未就情态动词义项分类的单一主导框架达成一致。这种分歧源于情态动词高度的灵活性和多义性,使研究人员更难将这类词的见解融入其工作。本工作提出 Moverb 数据集,包含对 4,540 条含一个或多个句子的社交对话话语中情态动词义项的 27,240 条标注。每条话语由三名标注者使用两种不同理论框架(即 Quirk 和 Palmer)进行标注。我们观察到,尽管义项类型数量不同(Quirk 为 8 种,Palmer 为 3 种),两种框架具有相似的标注者间一致性。使用在 \dataset 上微调的基于 RoBERTa 的分类器,我们在 Quirk 和 Palmer 上分别取得 82.2 和 78.3 的 F1 分数,表明情态动词义项消歧并非平凡任务。我们的数据集将在最终版本中公开可用。

关键词

引用

@article{arxiv.2212.10152,
  title  = {Quirk or Palmer: A Comparative Study of Modal Verb Frameworks with Annotated Datasets},
  author = {Risako Owan and Maria Gini and Dongyeop Kang},
  journal= {arXiv preprint arXiv:2212.10152},
  year   = {2022}
}