书面语言不同组织层次上的复杂度-熵分析
计算与语言
2019-05-20 v1
摘要
书面语言是复杂的。一篇书面文本可视为传达有意义信息的尝试，最终受语言规则、语境依赖的约束，并在资源使用上高度冗余。尽管有这些约束，不可预测性仍是自然语言的基本要素。此处我们提出使用熵度量来确定书面文本中可预测性与惊奇之间的平衡。简言之，可测量文档中的创新与语境保持。研究表明这也可在文本的不同组织层次上完成。所提出的分析类型相当通用，也可用于分析其他复杂信息（如DNA）中同样的平衡，其中已知存在组织层次的层级结构。
引用
@article{arxiv.1903.07416,
title = {Complexity-entropy analysis at different levels of organization in written language},
author = {E. Estevez-Rams and A. Mesa Rodriguez and D. Estevez-Moya},
journal= {arXiv preprint arXiv:1903.07416},
year = {2019}
}