中文

词义链接:越过沙盒进行词义消歧

计算与语言 2024-12-13 v1 人工智能

摘要

词义消歧 (Word Sense Disambiguation, WSD) 是将给定上下文中某个词与其可能含义集合中最合适的含义关联起来的任务。虽然该任务最近焕发出新兴interest,系统性能已达到估计的注释者间一致性水平,但在撰写本文时,它仍然难以找到下游应用。我们认为,其原因之一是将WSD应用于普通文本的困难。事实上,在标准表述下,模型是在假设a)所有待消歧的片段已经被识别,以及b)每个片段的所有可能候选义都被提供了的前提下工作的,而这两个要求都远非理想。在本工作中,我们提出了一种新任务,称为词义链接 (Word Sense Linking, WSL),其中,给定输入文本和参考义库,系统需要同时识别哪些片段需要消歧,然后将其链接到最合适的含义。我们提出了一种基于Transformer的架构用于该任务,并彻底评估了其性能以及扩展到WSL的前沿WSD系统的表现,通过迭代放宽WSD的假设。我们希望我们的工作将促进词汇语义在下游应用中的更易集成。

关键词

引用

@article{arxiv.2412.09370,
  title  = {Word Sense Linking: Disambiguating Outside the Sandbox},
  author = {Andrei Stefan Bejgu and Edoardo Barba and Luigi Procopio and Alberte Fernández-Castro and Roberto Navigli},
  journal= {arXiv preprint arXiv:2412.09370},
  year   = {2024}
}