OpticFusion：融合白光干涉与光学显微的多模态神经隐式三维微结构重建
计算机视觉与模式识别
2025-01-17 v1 应用物理
仪器与探测器
光学
摘要
白光干涉测量（WLI）是一种用于测量微结构三维形貌的精密光学工具。然而，传统WLI无法获取样品表面的自然颜色，而这对于许多需要同时获取三维几何与颜色信息的微尺度研究应用至关重要。以往的方法试图通过修改WLI硬件和分析软件来克服这一局限，但这些方案往往成本高昂。在本工作中，我们首次从计算机视觉的多模态重建角度来应对这一挑战。我们提出了OpticFusion，一种利用额外的数字光学显微镜（OM），通过多视角WLI和OM图像实现带自然颜色纹理的三维重建的新方法。我们的方法采用两步数据关联过程来获取WLI和OM数据的位姿。通过利用神经隐式表示，我们融合多模态数据，并应用颜色分解技术提取样品的自然颜色。在我们包含多种微尺度样品的多模态数据集上进行的测试表明，OpticFusion能够实现具有颜色纹理的精细三维重建。我们的方法为众多微尺度研究领域的实际应用提供了一种有效工具。源代码和我们的真实世界数据集可在 https://github.com/zju3dv/OpticFusion 获取。
引用
@article{arxiv.2501.09259,
title = {OpticFusion: Multi-Modal Neural Implicit 3D Reconstruction of Microstructures by Fusing White Light Interferometry and Optical Microscopy},
author = {Shuo Chen and Yijin Li and Guofeng Zhang},
journal= {arXiv preprint arXiv:2501.09259},
year = {2025}
}
备注
3DV 2025