中文

NewsClaims:一种基于属性知识的新闻声明检测新基准

计算与语言 2022-11-28 v4 人工智能

摘要

声明检测与验证对于新闻理解至关重要,并已成为减轻新闻中虚假信息与错误信息的 promising 技术。然而,现有工作大多聚焦于声明句子的分析,而忽略了其他关键属性(如声明者与声明所关联的主要对象)。在本文中,我们提出 NewsClaims,一个面向新闻领域属性感知声明检测的新基准。我们将声明检测问题扩展至包含提取与每条声明相关的附加属性,并发布在 143 篇新闻文章上标注的 889 条声明。NewsClaims 旨在对新兴场景下的声明检测系统进行基准测试,这些场景包含未见主题且仅有极少或没有训练数据。为此,我们发现零样本与基于提示的基线在该基准上展现出 promising 性能,但仍显著落后于人类表现。

关键词

引用

@article{arxiv.2112.08544,
  title  = {NewsClaims: A New Benchmark for Claim Detection from News with Attribute Knowledge},
  author = {Revanth Gangi Reddy and Sai Chetan and Zhenhailong Wang and Yi R. Fung and Kathryn Conger and Ahmed Elsayed and Martha Palmer and Preslav Nakov and Eduard Hovy and Kevin Small and Heng Ji},
  journal= {arXiv preprint arXiv:2112.08544},
  year   = {2022}
}

备注

Accepted at EMNLP 2022