IPVTON：基于图像提示适配器的图像式3D虚拟试穿
计算机视觉与模式识别
2025-01-28 v1
摘要
给定一对 depicting 一个人和一条独立的服装图像，图像式3D虚拟试穿方法旨在重建能够真实呈现该人穿着所需服装的3D人类模型。本文提出了IPVTON，一种新的图像式3D虚拟试穿框架。IPVTON采用图像提示进行评分蒸馈抽样，以优化混合3D人类表示，通过图像提示适配器将目标服装特征整合到扩散先验中。为避免与非目标区域的干扰，我们利用掩码引导的图像提示嵌入来将图像特征聚焦于试穿区域。此外，我们通过ControlNet生成的伪轮廓对3D模型施加几何约束，确保穿衣3D人类模型保留源身份的形状，同时准确地穿着目标服装。大量的定性和定量实验表明，IPVTON在图像式3D虚拟试穿任务中优于先前方法，在几何和纹理方面均表现出色。
关键词
引用
@article{arxiv.2501.15616,
title = {IPVTON: Image-based 3D Virtual Try-on with Image Prompt Adapter},
author = {Xiaojing Zhong and Zhonghua Wu and Xiaofeng Yang and Guosheng Lin and Qingyao Wu},
journal= {arXiv preprint arXiv:2501.15616},
year = {2025}
}