随机动力系统中互信息与最小均方误差之间的关系
信息论
2007-10-08 v1 math.IT
摘要
我们考虑一般的随机输入 - 输出动力系统，其输出作为由输入过程激发的具有泛函系数的 Itô 随机微分方程的解随时间演化。这类一般的随机系统不仅涵盖了经典的通信信道模型，还涵盖了出现在各种应用中的广泛工程系统。对于这一一般设定，我们发现了类似于先前在加性高斯噪声通信信道背景下建立的、连接输入 - 输出互信息与最小均方因果及非因果误差的已知关系。这些关系不仅以时间平均量建立，还提出了它们的时间瞬时动态对应量。我们还考虑了在此一般框架中适当引入通过信噪比参数表达的信噪比概念的问题，并确定了进行正确且有意义解释的条件。
引用
@article{arxiv.0710.1280,
title = {On the Relationship between Mutual Information and Minimum Mean-Square Errors in Stochastic Dynamical Systems},
author = {Francisco J. Piera and Patricio Parada},
journal= {arXiv preprint arXiv:0710.1280},
year = {2007}
}
评论
Submitted to IEEE Transactions on Information Theory