Try-On-Adapter：一种简单灵活的虚拟试穿范式
计算机视觉与模式识别
2024-11-18 v1
摘要
基于图像的虚拟试穿广泛应用于在线购物，旨在在给定服装条件下生成自然穿着服装的人体图像，具有显著的研究和商业潜力。试穿的关键挑战在于在保留服装细节的同时生成模特穿着服装的逼真图像。现有方法聚焦于遮盖原始模特站立图像的特定部位，然后在遮盖区域进行修复以生成模特穿着参考服装的逼真图像，将试穿任务视为修复任务。然而，此类实现要求用户提供完整、高质量的站立图像，在实际应用中对用户不友好。本文提出 Try-On-Adapter (TOA)，一种不同于现有修复范式的外绘范式。TOA 可保留给定的人脸和服装，自然生成图像其余部分，并通过服装属性、人体姿态等多种条件提供灵活的控制能力。实验中，TOA 在虚拟试穿任务上表现优异，即使在给定相对低质量的人脸和服装图像时，定性对比仍表现出色。此外，TOA 在 VITON-HD 数据集上成对和非成对设置下分别达到 5.56 和 7.23 的 FID 评分，实现最先进的定量性能。
引用
@article{arxiv.2411.10187,
title = {Try-On-Adapter: A Simple and Flexible Try-On Paradigm},
author = {Hanzhong Guo and Jianfeng Zhang and Cheng Zou and Jun Li and Meng Wang and Ruxue Wen and Pingzhong Tang and Jingdong Chen and Ming Yang},
journal= {arXiv preprint arXiv:2411.10187},
year = {2024}
}
备注
Image virtual try-on, 7 pages, 3 figures