基于N-gram的词干提取算法的生成、实现与评估
信息检索
2014-01-17 v2 计算与语言
摘要
人们一直在寻找一种与语言无关的词干提取器。单N-gram分词技术效果不错，但它经常生成以中间字符而非初始字符开头的词干。我们提出了一种新技术，将N-gram词干提取的概念向前推进了一步，并将我们的方法与该领域已有的算法——波特词干提取器进行了比较。结果表明，我们的N-gram词干提取器并不逊色于波特的语言学词干提取器。
引用
@article{arxiv.1312.4824,
title = {Generation, Implementation and Appraisal of an N-gram based Stemming Algorithm},
author = {B. P. Pande and Pawan Tamta and H. S. Dhami},
journal= {arXiv preprint arXiv:1312.4824},
year = {2014}
}
备注
10 pages