新视角人体动作合成
计算机视觉与模式识别
2020-10-09 v3
摘要
新视角人体动作合成旨在给定真实视角下的一段视频，从虚拟视角合成人体的运动。我们提出了一种新颖的3D推理方法来合成目标视角。我们首先估计目标人体的3D网格，并将2D图像上的粗略纹理转移到网格上。由于帧分辨率或遮挡，该转移可能在网格上产生稀疏纹理。我们通过局部（在局部测地邻域内）和全局（跨对称语义部分）传播已转移纹理，生成半稠密纹理网格。接下来，我们引入一种基于上下文的生成器，学习如何修正并补全残差外观信息。这使得网络能够独立聚焦于前景与背景合成任务的学习。我们在公开的NTU RGB+D数据集上验证了所提出的方案。代码与资源可在 https://bit.ly/36u3h4K 获取。
引用
@article{arxiv.2007.02808,
title = {Novel-View Human Action Synthesis},
author = {Mohamed Ilyes Lakhal and Davide Boscaini and Fabio Poiesi and Oswald Lanz and Andrea Cavallaro},
journal= {arXiv preprint arXiv:2007.02808},
year = {2020}
}
备注
Asian Conference on Computer Vision (ACCV) 2020