关于变分推断偏差与方差的注记
机器学习
2019-06-11 v1 机器学习
摘要
在本注记中,我们研究了变分间隙与(对数)似然比方差之间的关系。我们证明该间隙可由似然比的某种离散度度量上界限制,这表明变分推断的偏差可通过使似然比的分布更集中(例如通过平均与方差缩减)来减小。
引用
@article{arxiv.1906.03708,
title = {Note on the bias and variance of variational inference},
author = {Chin-Wei Huang and Aaron Courville},
journal= {arXiv preprint arXiv:1906.03708},
year = {2019}
}
备注
5 pages