SemEval-2021 任务 9：科学文献中表格数据的事实核查与证据查找（SEM-TAB-FACTS）
计算与语言
2021-06-04 v1
摘要
理解表格是一项重要且相关的任务，涉及理解表格结构以及能够比较和对比单元格内的信息。在本文中，我们通过提出一个新的数据集和任务来解决这一挑战，该数据集和任务在 SemEval 2020 任务 9：科学文献中表格数据的事实核查与证据查找（SEM-TAB-FACTS）的共享任务中实现了这一目标。我们的数据集包含 981 个手动生成的表格以及一个自动生成的包含 1980 个表格的数据集，提供超过 18 万条陈述和超过 1600 万条证据标注。SEM-TAB-FACTS 包含两个子任务。在子任务 A 中，目标是确定给定表格下某条陈述是被支持、被反驳还是未知。在子任务 B 中，重点是识别表格中为该陈述提供证据的具体单元格。69 支队伍报名参与该任务，其中 19 支成功提交子任务 A，12 支成功提交子任务 B。我们展示了竞赛的结果与主要发现。
引用
@article{arxiv.2105.13995,
title = {SemEval-2021 Task 9: Fact Verification and Evidence Finding for Tabular Data in Scientific Documents (SEM-TAB-FACTS)},
author = {Nancy X. R. Wang and Diwakar Mahajan and Marina Danilevsky and Sara Rosenthal},
journal= {arXiv preprint arXiv:2105.13995},
year = {2021}
}
备注
To Appear in SemEval 2021