利用边缘计算从笔记本电脑网络摄像头生成高保真人类化身

照片级真实感的人类化身具有广泛的应用，然而高保真化身的生成传统上需要昂贵的专业摄像设备和大量的艺术劳动。最近的研究使得能够利用带有 RGB 和红外传感器的智能手机自动构建它们，然而，这些新方法仍然依赖于现代智能手机上的高分辨率摄像头，并且通常需要将处理任务卸载到配备 GPU 的强大服务器上。视频会议等现代应用要求能够使用消费级笔记本电脑网络摄像头，并利用设备上有限的计算资源来生成这些化身。在这项工作中，我们开发了一种基于 3D 可变形模型、关键点检测、照片级真实感纹理 GAN 和可微渲染的新颖方法，以解决低网络摄像头图像质量和边缘计算的问题。我们构建了一个自动化系统，在这些限制下利用 AMD 移动处理器的计算能力生成高保真、可动画化的化身。