他们真的发过那条推文吗？查询事实核查网站与 Politwoops 以判定推文误归属
信息检索
2022-11-18 v1
摘要
社交媒体帖子的截图在社交网站上已变得司空见惯。尽管截图确有用途，但其泛滥使得伪造的、从未真实发布过的帖子截图得以传播，从而助长误归属虚假信息。出于检测此类虚假信息的动机，我们研究了开发向网络查询推文存在证据的方法。我们开发了软件，利用所谓推文的正文自动向多种服务（Google、Snopes 内置搜索、Reuters 内置搜索）发起搜索查询，以努力寻找事实核查文章及其他关于据称发布过的推文的证据。我们还开发了工具，用于自动在 Politwoops 网站上搜索某条可能由民选官员发布后又删除的特定推文。此外，我们开发了软件从 Reuters.com 与 Snopes.com 抓取事实核查文章，以便从这些站点的任意给定文章推导出“真实性评级”。为评估，我们开始构建一个具有已知证据的推文真值数据集（目前仅有 Snopes 事实核查文章）于实时网络之上，并基于仅使用那些推文正文所做的查询收集了 MRR 与 P@1 值。这些查询表明，Snopes 内置搜索约半数情况下能有效找到相关文章，MRR=0.5500 且 P@1=0.5333，而配合 site:snopes.com 操作符使用的 Google 通常能有效地找到相关文章，MRR=0.8667 且 P@1=0.8667。
引用
@article{arxiv.2211.09681,
title = {Did They Really Tweet That? Querying Fact-Checking Sites and Politwoops to Determine Tweet Misattribution},
author = {Caleb Bradford and Michael L. Nelson},
journal= {arXiv preprint arXiv:2211.09681},
year = {2022}
}
备注
20 pages