WikiCheck：基于 Wikipedia 的端到端开源自动事实核查 API
计算机与社会
2021-09-03 v1
摘要
随着假新闻与虚假信息的增长，NLP 社区一直致力于辅助人类进行事实核查。然而，大多数学术研究聚焦于模型准确率，而忽视了在真实场景至关重要的资源效率。本工作中，我们回顾了自动事实核查的 SOTA 数据集与解决方案，并测试了它们在生产环境中的适用性。我们发现这些模型存在过拟合问题，并提出了一种数据过滤方法以提升模型性能与泛化能力。随后，我们设计了对掩码语言模型的无监督微调，以改进其基于 Wikipedia 工作的准确率。我们还提出了一种新颖的查询增强方法，利用 Wikipedia 搜索 API 改进证据发现。最后，我们提出了一个新的事实核查系统，即 \textit{WikiCheck} API，它基于 Wikipedia 知识库自动执行事实验证流程。其在准确率上可与 SOTA 方案媲美，并可在低内存 CPU 实例上使用。
引用
@article{arxiv.2109.00835,
title = {WikiCheck: An end-to-end open source Automatic Fact-Checking API based on Wikipedia},
author = {Mykola Trokhymovych and Diego Saez-Trumper},
journal= {arXiv preprint arXiv:2109.00835},
year = {2021}
}