中文

互信息矩阵并不总是半正定的

信息论 2013-07-26 v1 math.IT

摘要

对于离散随机变量 X1,,XnX_1, \dots, X_n,我们构造了一个 n×nn \times n 矩阵。其 (i,j)(i,j) 元素为 XiX_iXjX_j 之间的互信息 I(Xi;Xj)I(X_i;X_j)。特别地,(i,i)(i,i) 元素为 XiX_i 的熵 H(Xi)=I(Xi;Xi)H(X_i)=I(X_i;X_i)。该矩阵被称为 (X1,,Xn)(X_1, \dots, X_n) 的互信息矩阵,此前曾被猜想为半正定矩阵。在本注记中,我们给出了该猜想的反例,并证明了该猜想对于不超过三个随机变量的情形成立。

关键词

引用

@article{arxiv.1307.6673,
  title  = {Mutual information matrices are not always positive semi-definite},
  author = {Sune K. Jakobsen},
  journal= {arXiv preprint arXiv:1307.6673},
  year   = {2013}
}

备注

4 pages, 1 figure