关于广义熵形式的无仓熵估计器的有效性
信息论
2010-01-04 v3 数据结构与算法
math.IT
数值分析
摘要
本文讨论了Kozachenko-Leonenko熵估计器在推广以处理通常用于研究展现渐近尺度不变性和依赖性（线性或非线性类型）系统的熵形式时的有效性。我们表明，当变量独立同分布时，仅当数据服从均匀分布时，该估计器在整个定义域内才有价值；而对于其他分布，该估计器仅在Boltzmann-Gibbs-Shannon熵形式的极限下有效。我们还分析了变量之间的依赖性（线性和非线性）对估计器精度的影响。正如预期，在后一种情况下，该估计器对Boltzmann-Gibbs-Shannon熵形式也失去了效率。
引用
@article{arxiv.0906.1360,
title = {On the effectiveness of a binless entropy estimator for generalised entropic forms},
author = {Silvio M. Duarte Queiros},
journal= {arXiv preprint arXiv:0906.1360},
year = {2010}
}
备注
10 pages. 5 Figures. 2 Appendices with 2 figures