概率自上而下解析与语言建模
计算与语言
2007-05-23 v1
摘要
本文描述了广泛覆盖的概率自上而下解析器的工作原理及其在语音识别中语言建模问题中的应用。首先介绍语言建模和概率解析中的关键概念，简要回顾了一些用于语言建模的语法结构方法。随后 presented a lexicalized probabilistic top-down parser, which performs very well, in terms of both the accuracy of returned parses and the efficiency with which they are found, relative to the best broad-coverage statistical parsers. 然后概述了一种新的语言模型，利用概率自上而下解析，实验结果表明它在测试语料库的困惑度上优于先前工作。与三元模型插值相比，所提出模型的改进显著高于其他模型所观察到的改进，表明我们的解析模型所捕获的信息与三元模型所捕获的信息在一定程度上是正交的。一个小型识别实验也表明了该模型的实用性。
引用
@article{arxiv.cs/0105016,
title = {Probabilistic top-down parsing and language modeling},
author = {Brian Roark},
journal= {arXiv preprint arXiv:cs/0105016},
year = {2007}
}
备注
28 pages, 6 tables, 8 figures. To appear in Computational Linguistics 27(2), June 2001