在大数据中使用Fisher信息
信息论
2016-11-17 v2 math.IT
摘要
在大数据时代,熟练使用数据挖掘是从任何数据集中获取有用信息的关键。由于众多数据挖掘技术利用了信息论概念,本文讨论如何应用Fisher信息(FI)来分析大数据中的模式。FI的主要优势在于其能够将多个变量结合在一起,以告知我们系统的总体趋势与稳定性。因此它可以检测系统是否正在失去动态秩序与稳定性,这可作为即将发生的体制转变的信号。在本工作中,我们首先简要概述Fisher信息理论,随后给出一个关于如何计算FI的简单逐步数值示例。最后,作为数值演示,我们计算了1960年至2013年美国人均GDP(现价美元)和总人口FI的演化。
引用
@article{arxiv.1507.00389,
title = {Using Fisher Information In Big Data},
author = {Nasir Ahmad and Sybil Derrible and Tarsha Eason and Heriberto Cabezas},
journal= {arXiv preprint arXiv:1507.00389},
year = {2016}
}