条件变分自编码器中空间结构与风格的解耦

本文旨在将条件变分自编码器(cVAE)的潜空间解耦为空间结构与风格码，二者互为补充，其中一个 $z_s$ 与标签相关，另一个 $z_u$ 与标签无关。生成器由相连的编码器-解码器与标签条件映射网络构成。根据标签是否与空间结构相关，条件映射网络输出的 $z_s$ 被用作风格码或空间结构码。编码器提供与标签无关的后验分布，从中采样得到 $z_u$。解码器在每一层通过 SPADE 或 AdaIN 之类的自适应归一化来使用 $z_s$ 与 $z_u$。在两个具有不同类型标签的数据集上的大量实验表明了方法的有效性。