HeadOn：人体肖像视频的实时重演

我们提出 HeadOn，首个面向完整人体肖像视频的实时源到目标重演方法，可实现躯干与头部运动、面部表情及视线注视的迁移。给定目标演员的一段短 RGB-D 视频，我们自动构建嵌入参数化头部、眼睛及运动学躯干模型的个性化几何代理。一种新颖的实时重演算法利用该代理将源演员的捕获运动逼真地映射到目标演员。在粗几何代理之上，我们提出一种基于视频的渲染技术，通过视角和姿态相关的纹理映射来合成修改后的目标肖像视频，并在新颖的躯干与头部姿态、面部表情及注视方向下生成目标演员的逼真图像。为此，我们提出对源演员面部与躯干的稳定跟踪。我们对该方法进行了广泛评估，并显示出其在创建逼真重演输出视频方面具有更大灵活性的显著改进。