可控连续视线重定向
计算机视觉与模式识别
2020-10-12 v1
摘要
在本工作中，我们提出 interpGaze，一种实现精确重定向与连续插值的可控视线重定向新框架。给定两张具有不同属性的视线图像，我们的目标是将一个人的眼睛视线重定向到参考图像中所描绘的任何视线方向，或生成连续的中间结果。为此，我们设计了一个包含三个协作组件的模型：编码器、控制器和解码器。编码器将图像映射到解耦良好且分层组织的潜空间。控制器通过更改控制向量将潜向量的大小调整为对应属性所需的强度。解码器将属性空间中所需的表示转换到图像空间。为促进覆盖完整的视线方向空间，我们引入了一个具有大范围方向的高质量视线图像数据集，这也惠及相关领域的研究者。大量实验验证以及与若干基线方法的比较表明，所提出的 interpGaze 在图像质量和重定向精度方面优于当前最优（SOTA）方法。
引用
@article{arxiv.2010.04513,
title = {Controllable Continuous Gaze Redirection},
author = {Weihao Xia and Yujiu Yang and Jing-Hao Xue and Wensen Feng},
journal= {arXiv preprint arXiv:2010.04513},
year = {2020}
}
备注
accepted by ACM International Conference on Multimedia (ACM MM), 2020