Steadiface：手机上的实时人脸中心稳定化
计算机视觉与模式识别
2019-05-07 v1
摘要
我们提出 Steadiface，一种新型实时人脸中心视频稳定方法，可同时消除手持抖动并保持受试者头部稳定。我们使用 CNN 估计人脸关键点，并用以优化一个稳定化的头部中心。随后我们构建一个优化问题，以寻找一个虚拟相机位姿，该位姿将人脸定位至稳定化头部中心，同时保持跨帧的平滑旋转与平移过渡。我们在实地测试视频上测试了所提方法，并显示其稳定了头部运动与背景。该方法对大头部姿态、遮挡、面部外观变化以及不同种类的相机运动均具鲁棒性。我们通过与替代方法比较，展示我们的方法推进了自拍视频稳定化的当前最优水平。整个过程在现代手机上运行极为高效（8.1 ms/帧）。
引用
@article{arxiv.1905.01382,
title = {Steadiface: Real-Time Face-Centric Stabilization on Mobile Phones},
author = {Fuhao Shi and Sung-Fang Tsai and Youyou Wang and Chia-Kai Liang},
journal= {arXiv preprint arXiv:1905.01382},
year = {2019}
}
备注
Accepted to be presented at ICIP 2019