FACTS:基于风格迁移的面部动画生成
图形学
2023-07-19 v1 计算机视觉与模式识别
摘要
准确捕捉并表达情感,是在电子游戏及其他娱乐形式中塑造可信角色的关键环节。传统上,这类动画依靠美术创作或表演捕捉来实现,二者均需耗费时间与人力成本。近年来,音频驱动模型取得了一定成功,然而这些模型在不受音频信号关联的区域往往缺乏表现力。本文提出一种新颖的面部动画方法,通过获取已有动画并允许修改其风格特征来实现。具体而言,我们探索使用 StarGAN 将 3D 面部动画转换为不同情感及特定人物风格。得益于一种新颖的视位保持损失(viseme-preserving loss),该方法能够维持动画的唇形同步。
引用
@article{arxiv.2307.09480,
title = {FACTS: Facial Animation Creation using the Transfer of Styles},
author = {Jack Saunders and Steven Caulkin and Vinay Namboodiri},
journal= {arXiv preprint arXiv:2307.09480},
year = {2023}
}