Refa\c{c}ade：基于给定参考纹理编辑物体
计算机视觉与模式识别
2025-12-05 v1
摘要
扩散模型的近期进展在图像和视频编辑方面取得了显著进展，但仍有一些任务未得到充分探索。本文引入了新的任务——物体重纹理(Object Retexture)，将参考物体上的局部纹理传递到图像或视频中的目标物体上。要实现此任务，一个直接的解决方案是使用基于源结构和参考纹理的ControlNet。然而，这种方法因两个原因受到受限控制的制约：一是基于原始参考图像的条件会引入不必要的结构信息，二是它无法解耦源的视觉纹理和结构信息。为此，我们提出Refa\c{c}ade，一种包含两个关键设计以实现图像和视频中精确且可控纹理传递的方法。首先，我们采用在paired textured/untextured 3D mesh renderings上训练的纹理移除器，以保留源视频的几何和运动信息的同时移除外观信息。其次，我们通过jigsaw置换破坏参考的全局布局，鼓励模型专注于局部纹理统计信息而非对象的全局布局。广泛的实验表明，我们的方法在视觉质量、精确编辑和可控性方面显著优于强大的基线方法，在定量和人类评估中均表现出色。代码可在 https://github.com/fishZe233/Refacade 获取。
关键词
引用
@article{arxiv.2512.04534,
title = {Refa\c{c}ade: Editing Object with Given Reference Texture},
author = {Youze Huang and Penghui Ruan and Bojia Zi and Xianbiao Qi and Jianan Wang and Rong Xiao},
journal= {arXiv preprint arXiv:2512.04534},
year = {2025}
}