论文档级信息抽取中的事件个体化问题
计算与语言
2023-10-24 v3 人工智能
机器学习
摘要
随着信息抽取(IE)系统在处理整篇文档方面变得更加熟练,模板填充这一经典任务作为文档级IE的基准重新受到关注。在这篇立场论文中,我们对模板填充用于此目的的适用性提出质疑。我们认为,该任务要求对事件个体化——即区分不同事件的问题——给出明确的答案,而即使是人类专家对此也存在分歧。通过一项标注研究和错误分析,我们表明这引发了对模板填充指标的有用性、该任务数据集的质量以及模型学习该任务的能力的担忧。最后,我们探讨了可能的解决方案。
引用
@article{arxiv.2212.09702,
title = {On Event Individuation for Document-Level Information Extraction},
author = {William Gantt and Reno Kriz and Yunmo Chen and Siddharth Vashishtha and Aaron Steven White},
journal= {arXiv preprint arXiv:2212.09702},
year = {2023}
}
备注
EMNLP: Findings 2023