基于身份变形迁移的视频卡通风格草图人脸编辑
计算机视觉与模式识别
2019-01-29 v3
摘要
我们解决了使用手绘草图对视频中人脸进行夸张变形的问题，例如放大眼睛或嘴巴的形状或改变其位置。该任务被形式化为一个三维人脸模型重建与变形问题。我们首先通过为每一帧拟合一个可变形人脸模型，从视频中恢复人脸身份和表情。同时，从输入的草图中识别用户的编辑意图，将其作为一组面部修改。然后，提出了一种新颖的身份变形算法，将这些面部变形从二维空间直接迁移到三维人脸身份上，同时保留面部表情。经过一个可选的进一步细化三维人脸模型的阶段后，这些变化会随修改后的身份传播到整个视频中。用户研究和实验结果均表明，我们的草图框架可以帮助用户有效地编辑视频中的人脸身份，同时确保高度的一致性和保真度。
引用
@article{arxiv.1703.08738,
title = {Cartoonish sketch-based face editing in videos using identity deformation transfer},
author = {Long Zhao and Fangda Han and Xi Peng and Xun Zhang and Mubbasir Kapadia and Vladimir Pavlovic and Dimitris N. Metaxas},
journal= {arXiv preprint arXiv:1703.08738},
year = {2019}
}
备注
In Computers & Graphics, 2019. (12 pages, 10 figures)