Nefnir:一种高精度的冰岛语词形还原工具
计算与语言
2019-07-30 v1
摘要
词形还原,即在语料中寻找词的基本形态,是处理形态丰富语言时许多自然语言处理任务中的重要步骤。我们描述并评估了 Nefnir,一种用于冰岛语的新型开源词形还原工具。Nefnir 使用从大型形态数据库导出的后缀替换规则对带标注文本进行词形还原。评估显示,对于正确标注的文本,Nefnir 达到了 99.55% 的准确率;对于使用词性(PoS)标注器标注的文本,获得的准确率为 96.88%。
引用
@article{arxiv.1907.11907,
title = {Nefnir: A high accuracy lemmatizer for Icelandic},
author = {Svanhvít Lilja Ingólfsdóttir and Hrafn Loftsson and Jón Friðrik Daðason and Kristín Bjarnadóttir},
journal= {arXiv preprint arXiv:1907.11907},
year = {2019}
}
备注
Presented at NoDaLiDa 2019, Turku, Finland