中文

二进制对称信道输出与其输入的布尔函数之间的最大互信息

信息论 2017-01-17 v2 math.IT

摘要

我们证明了Courtade-Kumar猜想,该猜想指出:对于记忆less二进制对称信道,其独立同分布nn维输入向量任意布尔函数与对应输出向量之间的互信息上界为1H(p)1-\operatorname{H}(p),其中H(p)\operatorname{H}(p)表示二进制熵函数。即,令X=[X1...Xn]\mathbf{X}=[X_1...X_n]为独立同分布的Bernoulli(1/21/2)随机变量向量,作为误差概率等于0p1/20 \leq p \leq 1/2的记忆less二进制对称信道的输入,且Y=[Y1...Yn]\mathbf{Y}=[Y_1...Y_n]为对应输出。令f:{0,1}n{0,1}f:\{0,1\}^n \rightarrow \{0,1\}为一个nn维布尔函数。则MI(f(X),Y)1H(p)\operatorname{MI}(f(\mathbf{X}),\mathbf{Y}) \leq 1-\operatorname{H}(p)。我们给出了该猜想最一般情况下的证明,即对任意nn维布尔函数ff以及二进制对称信道误差概率任意值0p1/20 \leq p \leq 1/2均成立。我们的证明仅使用了信息论、概率论以及随机变量与向量变换的基本概念。

关键词

引用

@article{arxiv.1604.05113,
  title  = {The maximum mutual information between the output of a binary symmetric channel and a Boolean function of its input},
  author = {Septimia Sarbu},
  journal= {arXiv preprint arXiv:1604.05113},
  year   = {2017}
}

备注

This paper has been withdrawn due to a critical error in the way the equation of the mutual information that involved conditional entropies was applied