关于随机编码器的优势
信息论
2021-04-30 v2 math.IT
机器学习
摘要
随机编码器因更易处理而被用于率失真理论和神经压缩。然而,在与确定性编码器的性能比较中,它们往往表现更差,这表明编码过程中的噪声可能 generally 是个坏主意。人们对于随机编码器何时以及是否优于确定性编码器知之甚少。本文提供一个说明性示例,表明随机编码器可显著优于最佳确定性编码器。我们的玩具示例表明,随机编码器在“完美感知质量”机制下可能尤为有用。
引用
@article{arxiv.2102.09270,
title = {On the advantages of stochastic encoders},
author = {Lucas Theis and Eirikur Agustsson},
journal= {arXiv preprint arXiv:2102.09270},
year = {2021}
}