InstantSticker：基于解耦对象重建的真实贴纸混合
计算机视觉与模式识别
2025-04-10 v1
摘要
我们提出了 InstantSticker，这是一种基于图像 Based Lighting (IBL) 的解耦重建管道，专注于实现高度真实的贴纸混合，模拟贴纸附着在重建表面，并支持即时编辑和实时渲染。为实现贴纸的立体感，我们引入了阴影因子到 IBL 中，该因子可在训练期间自适应优化。这使得表面的阴影亮度能够被准确分解，而不是烘焙到漫反射颜色中，从而确保编辑后的纹理呈现出真实的阴影。为解决以往方法中的畸变和模糊问题，我们对网格的指定区域应用了 As-Rigid-As-Possible (ARAP) 参数化，并结合局部 UV 映射和神经纹理图，以增强其表达高频细节的能力。为实现即时编辑，我们利用迪斯尼 BRDF 模型，明确定义以 3 通道漫反射反射率表示材料颜色。这使我们能够在编辑过程中即时替换漫反射 RGB 值，避免以往方法需要长期优化的局限。我们在实验中引入了比例方差畸变 (RVW) 指标来评估贴纸区域的局部几何畸变。广泛的实验结果表明，我们的方法在编辑质量、编辑速度和渲染速度方面均优于以往的贴纸混合方法，实现了最先进的水平。
引用
@article{arxiv.2504.06620,
title = {InstantSticker: Realistic Decal Blending via Disentangled Object Reconstruction},
author = {Yi Zhang and Xiaoyang Huang and Yishun Dou and Yue Shi and Rui Shi and Ye Chen and Bingbing Ni and Wenjun Zhang},
journal= {arXiv preprint arXiv:2504.06620},
year = {2025}
}
备注
Accepted by AAAI 2025