愚弄我两次：来自维基百科游戏化的蕴含关系
计算与语言
2021-04-13 v1
摘要
我们发布了 FoolMeTwice（简称 FM2），一个通过有趣的多人游戏收集的挑战性蕴含对大型数据集。游戏化鼓励对抗性样本，与其他流行的蕴含数据集相比，可经“捷径”求解的样本数量大幅降低。玩家面临两项任务。第一项任务要求玩家基于维基百科页面的证据撰写一条看似合理的声明。第二项展示由其他玩家撰写的两条看似合理的声明，其中一条为假，目标是在时间耗尽前将其识别出来。玩家“付费”查看从证据池中检索的线索：玩家所需证据越多，该声明越难。受激励的玩家之间的游戏产生了多样的声明构造策略，例如时间推理与转向不相关证据，并为蕴含与证据检索任务带来更高质量的数据。我们开源了该数据集与游戏代码。
引用
@article{arxiv.2104.04725,
title = {Fool Me Twice: Entailment from Wikipedia Gamification},
author = {Julian Martin Eisenschlos and Bhuwan Dhingra and Jannis Bulian and Benjamin Börschinger and Jordan Boyd-Graber},
journal= {arXiv preprint arXiv:2104.04725},
year = {2021}
}
备注
Published in NAACL 2021