重叠多词表达式有助于改进基于CRF的曼尼普尔语词性标注器
计算与语言
2012-03-23 v1
摘要
本文详细介绍了基于条件随机场(CRF)的曼尼普尔语词性标注中改进特征选择的方法。特征选择在CRF中至关重要,特征越好,输出结果越好。本研究旨在使先前的工作更加高效。我们尝试使用多种新特征运行CRF,并进一步尝试将重叠多词表达式(RMWE)作为另一特征。由于曼尼普尔语中RMWE丰富,识别RMWE成为提升词性标注结果的必要条件之一。新的CRF系统召回率为78.22%,精确率为73.15%,F值为75.60%。通过识别RMWE并将其作为特征,系统改进为召回率80.20%,精确率74.31%,F值77.14%。
引用
@article{arxiv.1203.4933,
title = {Reduplicated MWE (RMWE) helps in improving the CRF based Manipuri POS Tagger},
author = {Kishorjit Nongmeikapam and Lairenlakpam Nonglenjaoba and Yumnam Nirmal and Sivaji Bandyopadhyay},
journal= {arXiv preprint arXiv:1203.4933},
year = {2012}
}
备注
15 pages, 4 tables, 2 figures, the link http://airccse.org/journal/jcsit/1011csit05.pdf. arXiv admin note: text overlap with arXiv:1111.2399