面向推文的多模态实体链接
信息检索
2021-04-08 v1 计算与语言
多媒体
摘要
在许多信息抽取应用中，实体链接（EL）已成为一项关键任务，它允许利用知识库中命名实体的信息。在本文中，我们处理多模态实体链接（MEL）任务，这是一个新兴的研究领域，其中利用文本和视觉信息将模糊指称映射到知识库（KB）中的实体。首先，我们提出了一种构建用于 MEL 的完全标注 Twitter 数据集的方法，其中实体在 Twitter KB 中定义。然后，我们提出了一种从指称和实体的文本与视觉上下文中联合学习表示的模型。我们通过在所提出的数据集上评估该模型证明了其有效性，并强调了在可用时利用视觉信息的重要性。
引用
@article{arxiv.2104.03236,
title = {Multimodal Entity Linking for Tweets},
author = {Omar Adjali and Romaric Besançon and Olivier Ferret and Herve Le Borgne and Brigitte Grau},
journal= {arXiv preprint arXiv:2104.03236},
year = {2021}
}