TMO：利用可微渲染通过移动设备获取物体的带纹理网格
计算机视觉与模式识别
2023-03-28 v1
摘要
我们提出了一种在野外使用单台智能手机获取带纹理网格的新流程，该手机可提供图像、深度图及有效位姿。我们的方法首先引入一种RGBD辅助的运动恢复结构，其能生成经过滤波的深度图并在对应深度的引导下优化相机位姿。随后，我们采用神经隐式表面重建方法，该方法可得到高质量网格，并开发了一种新的训练过程以应用由经典多视立体方法提供的正则化。此外，我们应用可微渲染来微调不完整的纹理图并生成在感知上更接近原始场景的纹理。我们的流程可应用于现实世界中任意常见物体，无需实验室环境或精确的掩码图像。我们展示了具有复杂形状的捕获物体结果，并在数值上针对现有的3D重建与纹理映射方法验证了我们的方法。
引用
@article{arxiv.2303.15060,
title = {TMO: Textured Mesh Acquisition of Objects with a Mobile Device by using Differentiable Rendering},
author = {Jaehoon Choi and Dongki Jung and Taejae Lee and Sangwook Kim and Youngdong Jung and Dinesh Manocha and Donghwan Lee},
journal= {arXiv preprint arXiv:2303.15060},
year = {2023}
}
备注
Accepted to CVPR23. Project Page: https://jh-choi.github.io/TMO/