Phong 曲面:利用提升优化进行高效三维模型拟合
计算机视觉与模式识别
2020-07-10 v1
摘要
混合现实中的实时感知与交互能力要求在资源受限的硬件(如头戴式设备)上以低延迟解决一系列三维跟踪问题。事实上,对于诸如 HoloLens 2 等将 CPU 和 GPU 留给应用程序使用的设备,多个跟踪子系统需在持续实时基础上运行,同时共享单一数字信号处理器。为解决 HoloLens 2 手部跟踪的模型拟合问题(其计算预算约为 iPhone 7 的 1/100),我们引入了一种新曲面模型:“Phong 曲面”。借助计算机图形学思想,Phong 曲面描述了与三角网格模型相同的三维形状,但具有连续曲面法线,从而可使用基于提升的优化,相较基于 ICP 的方法带来显著效率提升。我们表明 Phong 曲面保留了更光滑曲面模型的收敛优势,而三角网格则不具备。
引用
@article{arxiv.2007.04940,
title = {The Phong Surface: Efficient 3D Model Fitting using Lifted Optimization},
author = {Jingjing Shen and Thomas J. Cashman and Qi Ye and Tim Hutton and Toby Sharp and Federica Bogo and Andrew William Fitzgibbon and Jamie Shotton},
journal= {arXiv preprint arXiv:2007.04940},
year = {2020}
}