中文

ByeGlassesGAN:保持身份的人脸图像眼镜去除

多媒体 2020-08-26 v1

摘要

本文提出一种新颖的用于眼镜去除的图像到图像 GAN 框架,称为 ByeGlassesGAN,其用于自动检测眼镜位置并从人脸图像中将其去除。我们的 ByeGlassesGAN 由一个编码器、一个人脸解码器和一个分割解码器组成。编码器负责从源人脸图像中提取信息,人脸解码器利用该信息生成去镜图像。分割解码器用于预测眼镜及补全人脸区域的分割掩码。分割解码器生成的特征向量与人脸解码器共享,有助于更好的重建结果。我们的实验表明,即便对于半透明有色眼镜或带眩光的眼镜,ByeGlassesGAN 也能在去镜人脸图像中提供视觉上令人满意的结果。此外,在我们的人脸识别实验中,将我们的方法作为预处理步骤,我们展示了带眼镜人脸图像的人脸识别准确率显著提升。

关键词

引用

@article{arxiv.2008.11042,
  title  = {ByeGlassesGAN: Identity Preserving Eyeglasses Removal for Face Images},
  author = {Yu-Hui Lee and Shang-Hong Lai},
  journal= {arXiv preprint arXiv:2008.11042},
  year   = {2020}
}