逃离缺陷：通过模板和槽位填充标注论证中潜在逻辑的底层结构
计算与语言
2024-06-19 v1
摘要
计算论证领域的现有研究主要聚焦于评估论证质量，较少关注阐明逻辑错误。在本工作中，我们引入了四套用于解释常见非正式逻辑谬误的可解释模板，以阐明谬误隐含的逻辑结构。运用这些模板，我们对来自 LOGIC 数据集的 400 条谬误论证进行标注研究，取得了较高的一致性得分（Krippendorf's alpha 为 0.54）和合理的覆盖率（0.83）。最终，我们进行了谬误结构检测实验，发现最先进的语言模型在检测谬误模板方面表现有限（准确率仅为 0.47）。为促进谬误研究，我们将数据集和标注指南公开 disponibles。
引用
@article{arxiv.2406.12402,
title = {Flee the Flaw: Annotating the Underlying Logic of Fallacious Arguments Through Templates and Slot-filling},
author = {Irfan Robbani and Paul Reisert and Naoya Inoue and Surawat Pothong and Camélia Guerraoui and Wenzhi Wang and Shoichi Naito and Jungmin Choi and Kentaro Inui},
journal= {arXiv preprint arXiv:2406.12402},
year = {2024}
}