中文

利用社交话语度量声明的可核查性以辅助事实核查

计算与语言 2023-09-19 v1

摘要

在线社交媒体平台的扩张导致在线内容消费激增。然而,这也为虚假声明与错误信息的传播提供了途径。因此,对大量人力来筛选并验证此类未核实声明的需求不断攀升。当前这些声明由事实核查员手动验证。但在线内容体量常超出其处理能力,使其难以及时验证每一条声明。因而,确定哪些断言值得事实核查并优先处理亟需关注的声明至关重要。判定一项声明是否需事实核查涉及多重因素,包括事实正确性、对公众的潜在影响、引发仇恨的概率等。尽管已有若干针对声明可核查性的研究,识别这些因素的系统性方法仍属开放挑战。为此,我们提出细粒度声明可核查性这一新任务,其支撑上述所有因素,并提供将声明判定为可核查的人类可能依据。我们给出 CheckIt,一个用于细粒度声明可核查性的手动标注大型 Twitter 数据集。我们以统一方法 CheckMate 对数据集进行基准测试,该方法联合判定声明是否可核查及导致该结论的因素。我们将所提系统与若干基线系统比较,最后给出结果与人工评估的深入分析,验证了融合可核查性因素在检测值得事实核查声明上的有效性。

关键词

引用

@article{arxiv.2309.09274,
  title  = {Leveraging Social Discourse to Measure Check-worthiness of Claims for Fact-checking},
  author = {Megha Sundriyal and Md Shad Akhtar and Tanmoy Chakraborty},
  journal= {arXiv preprint arXiv:2309.09274},
  year   = {2023}
}

备注

28 pages, 2 figures, 8 tables