面向视频对齐三维物体重建的光度网格优化
计算机视觉与模式识别
2019-03-21 v1 图形学
摘要
在本文中，我们解决从 RGB 视频进行三维物体网格重建的问题。我们的方法通过优化物体网格以实现多视角光度一致性，同时用形状先验约束网格形变，从而结合了多视角几何与数据驱动三维重建方法的优点。我们将此问题表述为每个网格面投影的分块图像对齐问题。我们的方法使我们能够仅凭光度误差更新形状参数，而无需任何深度或掩码信息。此外，我们展示了如何通过从虚拟视点进行光栅化来避免零光度梯度的退化。我们通过光度网格优化展示了合成与真实世界视频的三维物体网格重建结果，这是朴素网格生成网络或传统表面重建流程在无大量人工后处理下无法实现的。
引用
@article{arxiv.1903.08642,
title = {Photometric Mesh Optimization for Video-Aligned 3D Object Reconstruction},
author = {Chen-Hsuan Lin and Oliver Wang and Bryan C. Russell and Eli Shechtman and Vladimir G. Kim and Matthew Fisher and Simon Lucey},
journal= {arXiv preprint arXiv:1903.08642},
year = {2019}
}
备注
Accepted to CVPR 2019 (project page & code: https://chenhsuanlin.bitbucket.io/photometric-mesh-optim/)