CLEF 2020中的CheckThat!：实现社交媒体中声称的自动识别与核查
计算与语言
2020-01-24 v1 人工智能
信息检索
机器学习
摘要
我们描述了CheckThat!实验室的第三届，该实验室是2020年跨语言评估论坛（CLEF）的一部分。CheckThat!提出了四项互补任务及一项来自往届实验室的相关任务，以英语、阿拉伯语和西班牙语提供。任务1要求预测Twitter流中哪些推文值得事实核查。任务2要求判定推文中发布的声称能否利用一组先前已核查的声称进行验证。任务3要求从给定网页集合中检索可用于验证目标推文声称的文本片段。任务4要求利用一组网页及其中潜在有用的片段来预测目标推文声称的真实性。最后，该实验室提供第五项任务，要求预测英语政治辩论与演讲中提出的声称的核查价值。CheckThat!具备完整的评估框架。评估对排序任务采用平均精度均值或前k位精度，对分类任务采用F1。
引用
@article{arxiv.2001.08546,
title = {CheckThat! at CLEF 2020: Enabling the Automatic Identification and Verification of Claims in Social Media},
author = {Alberto Barron-Cedeno and Tamer Elsayed and Preslav Nakov and Giovanni Da San Martino and Maram Hasanain and Reem Suwaileh and Fatima Haouari},
journal= {arXiv preprint arXiv:2001.08546},
year = {2020}
}
备注
Computational journalism, Check-worthiness, Fact-checking, Veracity, CLEF-2020 CheckThat! Lab