混合预言:在基于转移的汉语依存句法分析中利用歧义性
计算与语言
2018-02-07 v2
摘要
在基于转移的依存句法分析器训练中,预言(oracle)用于为句子及其黄金树预测转移序列。然而,转移系统可能表现出歧义性,即存在多个可构成黄金树的正确转移序列。我们提出在神经依存句法分析器训练中利用该性质,并给出混合预言(Hybrid Oracle)。新预言给出一个解析状态的所有正确转移,用于交叉熵损失函数以提供更好的监督信号。它还用于为句子生成不同的转移序列,以更好地探索训练数据并提升分析器的泛化能力。评估表明,使用混合预言训练的分析器在汉语依存句法分析中优于使用传统预言的分析器。我们从语言学视角提供了分析。代码可在 https://github.com/lancopku/nndep 获取。
引用
@article{arxiv.1711.10163,
title = {Hybrid Oracle: Making Use of Ambiguity in Transition-based Chinese Dependency Parsing},
author = {Xuancheng Ren and Xu Sun},
journal= {arXiv preprint arXiv:1711.10163},
year = {2018}
}