EyeBAG：基于利用风格混合的数据增强实现眨眼与凝视的精确控制
计算机视觉与模式识别
2023-07-03 v1
摘要
生成模型的最新进展已实现照片级真实感人脸图像的生成，利用人脸生成技术的下游任务也随之取得进展。然而，用于下游任务的模型在眼睛控制（如眨眼、凝视重定向）方面仍不尽如人意。为克服此类眼睛控制问题，我们引入一种由两个不同的模块组成的新型框架：眨眼控制模块与凝视重定向模块。我们还提出一种新颖的数据增强方法来训练各模块，利用风格混合获得具有所需特征的图像。我们展示了我们的框架可生成高质量的眼睛控制图像，并演示了如何将其用于提升下游任务的性能。
引用
@article{arxiv.2306.17391,
title = {EyeBAG: Accurate Control of Eye Blink and Gaze Based on Data Augmentation Leveraging Style Mixing},
author = {Bryan S. Kim and Jeong Young Jeong and Wonjong Ryu},
journal= {arXiv preprint arXiv:2306.17391},
year = {2023}
}