两层神经网络携带信息中非线性的微扰方法
统计力学
2009-10-31 v1
摘要
我们评估了在噪声和非线性模拟信道情况下,两层网络输入和输出之间的互信息。在非线性相对于噪声变异性较小的情形下,我们推导了微扰理论一阶下非线性项对互信息贡献的精确表达式。最后,我们展示了如何通过图解展开来简化计算。我们的结果表明,将微扰理论应用于神经系统,可能有助于理解非线性对信息传输以及一般神经元动力学的贡献。
引用
@article{arxiv.cond-mat/0010249,
title = {A perturbative approach to non-linearities in the information carried by a two layer neural network},
author = {E. Korutcheva and V. Del Prete and J. -P. Nadal},
journal= {arXiv preprint arXiv:cond-mat/0010249},
year = {2009}
}
备注
Accepted as a preprint of ICTP, Trieste