论日语词的定义
计算与语言
2019-06-25 v1
摘要
Universal Dependencies (UD) 的标注指南规定,依存标注的基本单位是句法词,但日语中的句法词是什么尚不清楚。不同于长期以来使用称为“文节”(bunsetsu)的短语单位进行依存分析的传统,当前的 UD 日语树库采用了短单元词 (Short Unit Words)。然而,我们认为它们并非标注指南所规定的句法词。尽管我们发现了从语言学上定义日语词的少数非主流尝试,但此类定义从未应用于语料库标注。我们讨论了采用这一相当陌生的标准所带来的成本与收益。
引用
@article{arxiv.1906.09719,
title = {On the Definition of Japanese Word},
author = {Yugo Murawaki},
journal= {arXiv preprint arXiv:1906.09719},
year = {2019}
}