基于三维先验的非确定性人脸遮挡去除
计算机视觉与模式识别
2022-03-04 v2
摘要
本文提出一种用于人脸遮挡去除的新型图像修复框架。尽管现有方法在恢复受损人脸图像方面已展现出令人印象深刻的性能，但它们存在两个主要问题：依赖于人工标注的缺失区域，以及每个输入对应确定性的结果。所提方法通过将多任务三维人脸重建模块与人脸修复模块相集成来解决这些问题。给定一张带遮挡的人脸图像，前者预测基于 3DMM 的重建人脸以及二值遮挡图，提供稠密的几何与纹理先验，极大便利了后者的修复任务。通过逐步控制三维形状参数，我们的方法生成具有不同表情与嘴部运动的高质量动态修复结果。定性与定量实验验证了所提方法的有效性。
引用
@article{arxiv.2202.09856,
title = {Non-Deterministic Face Mask Removal Based On 3D Priors},
author = {Xiangnan Yin and Liming Chen},
journal= {arXiv preprint arXiv:2202.09856},
year = {2022}
}