探索标点符号在自然语言文本解析中的作用
cmp-lg
2008-02-03 v1 计算与语言
摘要
当前的自然语言处理系统很少对标点符号加以利用。从直觉上看,对标点符号的处理似乎对于文本的分析和生成是必要的。虽然在话语结构领域已有此建议,但在句法领域标点符号是否有帮助仍不清楚。本研究通过使用两种相似语法解析基于语料库的材料来回答这个问题——一种包含标点规则,另一种忽略标点。含标点的语法显著优于不含标点的语法,因此得出结论:标点符号可以在句法处理中发挥有用作用。
引用
@article{arxiv.cmp-lg/9505024,
title = {Exploring the role of Punctuation in Parsing Natural Text},
author = {Bernard Jones},
journal= {arXiv preprint arXiv:cmp-lg/9505024},
year = {2008}
}
备注
5 pages, LaTeX (2.09 preferred), COLING-94 paper