基于不可见标记的无纹理可变形表面重建
计算机视觉与模式识别
2024-05-30 v2
摘要
重建与跟踪几乎无纹理或完全无纹理的可变形表面长期存在挑战。根本上，这些挑战源于无纹理表面缺乏用于建立跨图像对应关系的特征。本工作中，我们提出一种新型标记，主动丰富物体表面特征，从而简化三维表面重建与对应跟踪。我们的标记由荧光染料制成，仅在紫外(UV)光下可见，在常规光照条件下不可见。利用该标记，我们设计了一个多相机系统，以时分复用方式捕获UV光与可见光下的表面形变。在UV光下，物体上的标记显现以丰富其表面纹理，实现高质量三维形状重建与跟踪；在可见光下，标记不可见，使我们能捕获物体原始未改动的外观。我们在多种挑战性场景上实验，包括手势、面部表情、挥动布料及手-物交互。在所有这些情况下，我们证明系统能够生成鲁棒、高质量的三维重建与跟踪。
引用
@article{arxiv.2308.13678,
title = {Textureless Deformable Surface Reconstruction with Invisible Markers},
author = {Xinyuan Li and Yu Guo and Yubei Tu and Yu Ji and Yanchen Liu and Jinwei Ye and Changxi Zheng},
journal= {arXiv preprint arXiv:2308.13678},
year = {2024}
}