视觉中的皮格马利奥效应：基于图像到黏土翻译的反射几何重建
计算机视觉与模式识别
2025-11-27 v1 人工智能
图形学
摘要
由于视图相关反射导致外观与几何信息纠缠，理解反射始终是 3D 重建中长期存在的挑战。本文提出一种视觉中的皮格马利奥效应，即通过图像到黏土翻译来 sculpt 反射对象为黏土式形态的新框架。受希腊神话中皮格马利奥的启发，我们的方法学习抑制镜面线索，同时保持内在几何一致性，从而实现从包含复杂反射的多视图图像中进行稳健的几何重建。具体而言，我们引入一个双分支网络，其中基于 BRDF 的反射分支受到一个黏土引导分支的补充，后者稳定几何并细化表面法线。两个分支使用合成的黏土式图像进行联合训练，这些图像提供一种中性、无反射的监督信号，以补充反射视图。在合成和真实数据集上的实验表明，我们的方法在法线精度和网格完整性方面显著优于现有反射处理方法。除技术收益外，我们的框架揭示了通过“无光”观察，将辐射转换为中性，这种方法可作为反射对象几何学习的强大归纳偏置。
引用
@article{arxiv.2511.21098,
title = {Pygmalion Effect in Vision: Image-to-Clay Translation for Reflective Geometry Reconstruction},
author = {Gayoung Lee and Junho Kim and Jin-Hwa Kim and Junmo Kim},
journal= {arXiv preprint arXiv:2511.21098},
year = {2025}
}