FAIVConf:面向低码率 AI 视频会议的人脸增强方法
图像与视频处理
2022-07-12 v1 人工智能
计算机视觉与模式识别
摘要
近年来,以更少传输比特实现高质量视频会议已成为一个非常热门且具挑战性的问题。我们提出了 FAIVConf,一种专为视频会议设计的、基于高效神经人脸生成技术的视频压缩框架。FAIVConf 结合了多项设计以提升系统在真实视频会议场景中的鲁棒性:通过换脸避免背景动画中的伪影;通过人脸模糊降低传输码率并保持提取人脸关键点的质量;以及通过动态源更新进行人脸视角插值以适应大范围头部姿态。我们的方法在视频会议中实现了显著的码率降低,并在相同码率下相比 H.264 和 H.265 编码方案给出了更好的视觉质量。
引用
@article{arxiv.2207.04090,
title = {FAIVConf: Face enhancement for AI-based Video Conference with Low Bit-rate},
author = {Zhengang Li and Sheng Lin and Shan Liu and Songnan Li and Xue Lin and Wei Wang and Wei Jiang},
journal= {arXiv preprint arXiv:2207.04090},
year = {2022}
}
备注
ICME 2022