维度情感空间中的照片级真实人脸合成
图形学
2018-11-21 v1 计算机视觉与模式识别
机器学习
摘要
本文提出一种新的人脸情感合成方法，其基于我们将 4DFAB 数据库的 600,000 帧按效价与唤醒度进行标注。该方法的输入为一对这样的情绪状态描述符，以及待合成相应情感的人物的中性 2D 图像。给定该目标对，选取一组 3D 人脸网格，用于构建 blendshape 模型并生成新的人脸情感。为在 2D 中性图像上合成情感，进行 3DMM 拟合，并将重建人脸变形以生成目标面部表情。最后，将新脸渲染至原始图像中。定性与定量实验研究均表明，当中性图像取自 Aff-Wild、AFEW、Multi-PIE、AFEW-VA、BU-3DFE、Bosphorus 等多种知名数据库时，可生成真实感图像。
引用
@article{arxiv.1811.08004,
title = {Photorealistic Facial Synthesis in the Dimensional Affect Space},
author = {Dimitrios Kollias and Shiyang Cheng and Maja Pantic and Stefanos Zafeiriou},
journal= {arXiv preprint arXiv:1811.08004},
year = {2018}
}
备注
arXiv admin note: substantial text overlap with arXiv:1811.05027