3DOT:来自单个参考图像的 3DGS 对象的纹理迁移
计算机视觉与模式识别
2025-10-17 v2
摘要
3D 纹理置换允许对 3D 对象的纹理进行定制,实现 3D 编辑中高效且灵活的视觉转换。虽然不存在专门的方法,但可采用改编的 2D 编辑和基于文本的 3D 编辑方法来实现此目的。然而,2D 编辑需要逐帧操作,导致不同视角间不一致;而基于文本的 3D 编辑难以保留参考图像中的纹理特征。为解决这些挑战,我们引入 3DSwapping,一种集成 1) 渐进生成、2) 视角一致性梯度引导和 3) 提示调优梯度引导的 3D 纹理置换方法。为确保视角一致性,我们的渐进生成过程从编辑单个参考图像开始,并逐渐传播到相邻视角。我们的视角一致性梯度引导进一步通过对特征差异进行条件化来强化一致性。为保留纹理特征,我们引入基于提示调优的梯度引导,该方法学习一个精确捕获参考图像与 3D 对象的差异的 token,然后引导编辑过程,确保跨多个视角的纹理更一致。总体而言,3DSwapping 将这些新颖策略集成以实现更高保真度的纹理迁移,同时保持跨多个视角的结构一致性。广泛的定性和定量评估确认,我们的三个新颖组件能够为 3D 对象的 2D 纹理置换实现令人信服且有效的结果。代码将在接受后提供。
引用
@article{arxiv.2503.18853,
title = {3DOT: Texture Transfer for 3DGS Objects from a Single Reference Image},
author = {Xiao Cao and Beibei Lin and Bo Wang and Zhiyong Huang and Robby T. Tan},
journal= {arXiv preprint arXiv:2503.18853},
year = {2025}
}