Reddit 实体链接数据集
计算与语言
2021-02-26 v2
摘要
我们引入并公开了一个来自 Reddit 的实体链接数据集,其包含 17,316 个被链接实体,每个实体由三名人类标注者标注,随后被归为 Gold、Silver 和 Bronze 以表示标注者间一致性。我们分析了标注者所犯的不同错误与分歧,并针对原始数据提出三类修正。最后,我们测试了在 non-social media 数据集上训练并调优的现有实体链接模型。我们发现,尽管这些现有实体链接模型在其原始数据集上表现非常好,它们在该社交媒体数据集上表现糟糕。我们还表明这些错误大多可归因于提及检测子任务上的不佳表现。这些结果表明需要更好的实体链接模型以应用于海量社交媒体文本。
引用
@article{arxiv.2101.01228,
title = {Reddit Entity Linking Dataset},
author = {Nicholas Botzer and Yifan Ding and Tim Weninger},
journal= {arXiv preprint arXiv:2101.01228},
year = {2021}
}
备注
20 pages and 4 figures