将新闻标题映射至知识图谱事件类的评估框架
计算与语言
2023-12-06 v1 人工智能
摘要
将持续更新的新闻标题映射至丰富知识库中的事件相关类，可以是基于知识的事件分析与预测解决方案的重要组成部分。在本文中，我们提出了一种创建基准数据集的方法，该数据集将新闻标题映射至 Wikidata 中的事件类，并提供了用于评估执行该映射方法的资源。我们使用该数据集研究针对此任务的两类无监督方法：1）经典实体链接方法的改编；2）将该问题视为零样本文本分类问题的方法。对于第一种方法，我们评估了现成的实体链接系统。对于第二种方法，我们探索了 a）预训练自然语言推理（NLI）模型，以及 b）预训练大型生成式语言模型。我们展示了评估结果、经验教训以及未来的工作方向。数据集和评估脚本已公开发布。
引用
@article{arxiv.2312.02334,
title = {An Evaluation Framework for Mapping News Headlines to Event Classes in a Knowledge Graph},
author = {Steve Fonin Mbouadeu and Martin Lorenzo and Ken Barker and Oktie Hassanzadeh},
journal= {arXiv preprint arXiv:2312.02334},
year = {2023}
}
备注
Presented at CASE 2023 @ RANLP https://aclanthology.org/2023.case-1.6/