自然语言句法遵循自由能原理
计算与语言
2022-10-28 v1
摘要
自然语言句法产生了无限阵列的层级结构表达式。我们主张,这些表达式服务于主动推理,并与自由能原理 (FEP) 相一致。虽然概念性进展以及建模和仿真工作已尝试将语音分割及语言交流与 FEP 联系起来,但我们将此研究计划扩展到负责生成句法对象的基础计算。我们论证,最近提出的语言设计中的经济性原则——例如理论句法中的“最小搜索”准则——遵循 FEP。这赋予了 FEP 对更高语言功能更大的解释力,并为语言学提供了关于可计算性的第一性原理基础。我们展示了如何利用树几何深度和 Kolmogorov 复杂度估计(采用 Lempel-Ziv 压缩算法)来准确预测句法工作空间上的合法操作,这直接符合变分自由能最小化的表述。这被用来激发一个我们称之为图灵-乔姆斯基压缩 (TCC) 的语言设计通用原则。我们利用 TCC,通过汇集来自理论语言学和心理语言学的证据,将高效句法计算的核心原则置于主动推理之内,从而使语言学家的关切与 FEP 提供的自组织规范性解释保持一致。
引用
@article{arxiv.2210.15098,
title = {Natural Language Syntax Complies with the Free-Energy Principle},
author = {Elliot Murphy and Emma Holmes and Karl Friston},
journal= {arXiv preprint arXiv:2210.15098},
year = {2022}
}