中文

利用 BERT 与知识库侧信息的距离监督神经关系抽取

计算与语言 2020-10-20 v3 信息检索 机器学习

摘要

关系抽取(RE)旨在对句子中实体间的关系进行分类。开发关系抽取器的近期范式是距离监督(DS),其通过文本语料库与知识库(KB)的对齐实现新数据集的自动构建。KB 有时也可为 RE 任务提供附加信息。采用此策略的方法之一是 RESIDE 模型,其提出利用来自 KB 侧信息的距离监督神经关系抽取。考虑到该方法优于最先进基线,本文提出一种与 RESIDE 相关的方法,同样使用附加侧信息,但以 BERT 嵌入简化句子编码。通过实验,我们在 Google Distant Supervision 与 Riedel 数据集上针对 BGWA 与 RESIDE 基线方法展示了所提方法的有效性。尽管因数据集不平衡导致曲线下面积下降,P@N 结果显示以 BERT 作为句子编码可取得优于基线方法的性能。

关键词

引用

@article{arxiv.2004.14443,
  title  = {Distantly-Supervised Neural Relation Extraction with Side Information using BERT},
  author = {Johny Moreira and Chaina Oliveira and David Macêdo and Cleber Zanchettin and Luciano Barbosa},
  journal= {arXiv preprint arXiv:2004.14443},
  year   = {2020}
}

备注

2020 International Joint Conference on Neural Networks (IJCNN)