基于骨架的特征在虚拟试衣中的重要性
计算机视觉与模式识别
2024-01-09 v3
摘要
虚拟试衣（VTON）的理念通过让用户在家中舒适地试穿服装，为电子零售带来便利。一般而言，当一个人以手臂弯曲或交叉的姿势（如抱臂）想要试穿服装时，大多数现有VTON方法会产生不一致的结果。在长袖服装的情况下问题尤为严重，因为交叉手臂姿势可能导致不同服装部件之间的重叠。现有方法，特别是采用薄板样条（Thin Plate Spline, TPS）变换的基于扭曲的方法，无法应对此类情况。为此，我们尝试一种解决方案：将源人物的服装分割为语义上有意义的部件，并将每个部件独立地扭曲到人体形状上。为解决弯曲问题，我们采用符合人体几何结构的手工几何特征来扭曲源服装。此外，我们提出两个基于学习的模块：合成网络与掩码预测网络。这些共同致力于在不需任何配对训练数据的情况下，生成逼真且对姿态鲁棒的虚拟试衣方案。与若干基准方法的比较清楚地证明了该方法的有效性。
引用
@article{arxiv.2208.08076,
title = {Significance of Skeleton-based Features in Virtual Try-On},
author = {Debapriya Roy and Sanchayan Santra and Diganta Mukherjee and Bhabatosh Chanda},
journal= {arXiv preprint arXiv:2208.08076},
year = {2024}
}