PICTURE：基于无约束设计的照片级真实虚拟试穿
计算机视觉与模式识别
2023-12-08 v1
摘要
本文提出了一种新颖的基于非约束设计的虚拟试穿（ucVTON）任务，旨在输入人体图像上实现个性化组合服装的照片级真实合成。与受限于特定输入类型的先前技术不同，我们的方法允许灵活指定风格（文本或图像）和纹理（完整服装、裁剪部分或纹理块）条件。为解决使用完整服装图像作为条件时的纠缠挑战，我们开发了一个两阶段流程，明确解耦风格和纹理。在第一阶段，我们根据输入生成反映所需风格的人体解析图。在第二阶段，我们根据纹理输入将纹理合成到解析图的区域上。为了表示以往时尚编辑工作中从未实现的复杂和非平稳纹理，我们首次提出在 VTON 中提取分层且平衡的 CLIP 特征并应用位置编码。实验证明了我们的方法实现了卓越的合成质量和个人化能力。对风格和纹理混合的灵活控制将虚拟试穿提升到了在线购物和时尚设计用户体验的新水平。
引用
@article{arxiv.2312.04534,
title = {PICTURE: PhotorealistIC virtual Try-on from UnconstRained dEsigns},
author = {Shuliang Ning and Duomin Wang and Yipeng Qin and Zirong Jin and Baoyuan Wang and Xiaoguang Han},
journal= {arXiv preprint arXiv:2312.04534},
year = {2023}
}
备注
Project page: https://ningshuliang.github.io/2023/Arxiv/index.html