虚拟试穿中解剖学约束的重要性
计算机视觉与模式识别
2024-01-05 v1
摘要
虚拟试穿（VTON）系统允许用户虚拟试用产品。通常，VTON 系统接收服装源和人物图像，以预测人物穿着给定服装的试穿输出。尽管现有方法在简单姿态下表现良好，但在手臂弯曲或交叉的姿态下，或者当源服装的对齐与目标人物的姿态之间存在显著差异时，这些方法会因生成不准确的服装变形而失败。在采用基于薄板样条（TPS）的服装变换的 VTON 方法中，这主要归因于两个原因——(1) TPS 的二阶平滑约束限制了物体平面的弯曲。(2) 不同服装部位（例如袖子和躯干）之间的重叠无法通过单个 TPS 变换进行建模，因为它将服装假设为单一平面物体；因此，忽略了不同服装部位运动的独立性。为此，我们做出了两项主要贡献。针对 TPS 的弯曲限制，我们提出了一种人体解剖感知几何（ATAG）变换。针对重叠问题，我们提出了一种基于部位的变形方法，将服装划分为可独立变形的部位以分别进行变形，随后将它们组合。广泛的分析表明了该方法的有效性。
引用
@article{arxiv.2401.02110,
title = {Significance of Anatomical Constraints in Virtual Try-On},
author = {Debapriya Roy and Sanchayan Santra and Diganta Mukherjee and Bhabatosh Chanda},
journal= {arXiv preprint arXiv:2401.02110},
year = {2024}
}
备注
arXiv admin note: substantial text overlap with arXiv:2208.08076