二维几何信息究竟能告诉我们关于三维人脸形状的什么信息？
计算机视觉与模式识别
2019-08-01 v3
摘要
人脸图像包含构型信息和轮廓形式的几何线索，可用于估计三维人脸形状。尽管在没有进一步约束的情况下，从二维点进行三维重建显然具有高度歧义性，但人们可能会期望人脸空间约束能解决这一问题。我们表明情况并非如此，且几何信息是一种具有歧义性的线索。这种歧义有两个来源。第一，在三维人脸形状空间中，当面部某些部分固定时，仍存在柔性模式。第二，该来源仅在透视投影下出现，是随相机距离变化产生的透视变换的结果。两个不同的人脸在不同距离下观察，可以产生相同的二维几何信息。为了证明这些歧义性，我们开发了在正交或透视投影下将三维可变形模型拟合到二维特征点或轮廓的新算法，并展示了如何计算这两种情况下的柔性模式。我们表明这两个拟合问题都可以表述为可分离非线性最小二乘问题并得到高效求解。我们定量和定性地证明，这种歧义性不仅存在于仅使用几何信息的重建中，也存在于基于最先进CNN方法的重建中。
引用
@article{arxiv.1708.06703,
title = {What does 2D geometric information really tell us about 3D face shape?},
author = {Anil Bas and William A. P. Smith},
journal= {arXiv preprint arXiv:1708.06703},
year = {2019}
}