中文

Costa 熵幂不等式中的高阶导数

信息论 2015-08-05 v3 math.IT

摘要

XX 为任意连续随机变量,ZZ 为均值为零、方差为单位的独立高斯随机变量。对于 t > 0t~>~0,Costa 证明了 e2h(X+tZ)e^{2h(X+\sqrt{t}Z)} 关于 tt 是凹的,其证明依赖于 h(X+tZ)h(X+\sqrt{t}Z) 的一阶和二阶导数。具体而言,这两个导数是定号的,即 th(X+tZ)0\frac{\partial}{\partial t}h(X+\sqrt{t}Z) \geq 02t2h(X+tZ)0\frac{\partial^2}{\partial t^2}h(X+\sqrt{t}Z) \leq 0。在本文中,我们证明了 h(X+tZ)h(X+\sqrt{t}Z) 的三阶导数是非负的,这意味着 Fisher 信息 J(X+tZ)J(X+\sqrt{t}Z) 关于 tt 是凸的。我们进一步证明了 h(X+tZ)h(X+\sqrt{t}Z) 的四阶导数是非正的。继前四阶导数之后,我们就 h(X+tZ)h(X+\sqrt{t}Z) 提出两个猜想:第一个是若 nn 为奇数,则 ntnh(X+tZ)\frac{\partial^n}{\partial t^n} h(X+\sqrt{t}Z) 关于 tt 非负,否则非正;第二个是 logJ(X+tZ)\log J(X+\sqrt{t}Z) 关于 tt 是凸的。第一个猜想可以在完全单调函数的背景下重述:J(X+tZ)J(X+\sqrt{t}Z) 关于 tt 是完全单调的。第一个猜想的历史可追溯至 McKean 在 1966 年研究的一个数学物理问题。除了这些结果外,我们还对保协方差变换提供了几何解释,并研究了 h(tX+1tZ)h(\sqrt{t}X+\sqrt{1-t}Z) 的凹性,揭示了其与 Costa 熵幂不等式(EPI)的联系。

关键词

引用

@article{arxiv.1409.5543,
  title  = {Higher Order Derivatives in Costa's Entropy Power Inequality},
  author = {Fan Cheng and Yanlin Geng},
  journal= {arXiv preprint arXiv:1409.5543},
  year   = {2015}
}

备注

Second version submitted. https://sites.google.com/site/chengfancuhk/