暗示人类语言概率本质的词频统计模式
计算与语言
2020-12-02 v1 计算物理
摘要
传统语言学理论在很大程度上将语言视为由刚性规则构成的形式系统。然而，它们在处理真实语言上的失败、统计自然语言处理近期的成功，以及许多心理学实验的发现都表明，语言可能更像是一个概率系统而非形式系统，因而无法用形式语言学理论的非此即彼规则忠实建模。本研究基于真实语言数据证实，那些重要的语言问题，如语言普遍性、历时漂移与语言变异，都可以转化为言语中的概率与频率模式。这些发现表明，人类语言本质上很可能就是概率系统，而统计性很可能构成人类语言的固有属性。
引用
@article{arxiv.2012.00187,
title = {Statistical patterns of word frequency suggesting the probabilistic nature of human languages},
author = {Shuiyuan Yu and Chunshan Xu and Haitao Liu},
journal= {arXiv preprint arXiv:2012.00187},
year = {2020}
}