基于单目视频的实时瞳孔跟踪用于数字木偶
计算机视觉与模式识别
2020-06-23 v1
摘要
我们提出了一种在移动设备上从实时视频进行瞳孔跟踪的简单实时方法。我们的方法以最先进的面部网格检测器为基础，增加了两个新组件：一个预测瞳孔在 2D 中位置的微型神经网络，以及基于位移的瞳孔混合形状系数估计。我们的技术可用于精确控制虚拟木偶的瞳孔运动，并为其赋予生动与活力。所提方法在现代手机上以超过 50 FPS 运行，使其可用于任何实时木偶操控流水线。
引用
@article{arxiv.2006.11341,
title = {Real-time Pupil Tracking from Monocular Video for Digital Puppetry},
author = {Artsiom Ablavatski and Andrey Vakunov and Ivan Grishchenko and Karthik Raveendran and Matsvei Zhdanovich},
journal= {arXiv preprint arXiv:2006.11341},
year = {2020}
}