RMGN：一种用于无解析器虚拟试穿的区域掩码引导网络
计算机视觉与模式识别
2022-04-26 v1
摘要
虚拟试穿(VTON)旨在将目标衣物拟合到参考人物图像上，广泛应用于电子商务。现有 VTON 方法按是否依赖解析器信息来遮挡人物衣物并合成试穿图像，可狭义分为基于解析器(PB)与无解析器(PF)两类。尽管放弃解析器信息提升了 PF 方法的适用性，细节合成能力也被牺牲。因此，原始衣物的干扰可能持续存在于合成图像中，尤其在复杂姿态与高分辨率应用中。为解决上述问题，我们提出一种名为区域掩码引导网络(RMGN)的新型 PF 方法。更具体地，提出区域掩码以显式融合目标衣物与参考人物特征，从而消除持续干扰。进一步提出姿态感知损失与多级特征提取器以处理复杂姿态并合成高分辨率图像。大量实验表明，我们所提 RMGN 优于最先进的 PB 与 PF 方法。消融研究进一步验证了 RMGN 中模块的有效性。
引用
@article{arxiv.2204.11258,
title = {RMGN: A Regional Mask Guided Network for Parser-free Virtual Try-on},
author = {Chao Lin and Zhao Li and Sheng Zhou and Shichang Hu and Jialun Zhang and Linhao Luo and Jiarun Zhang and Longtao Huang and Yuan He},
journal= {arXiv preprint arXiv:2204.11258},
year = {2022}
}
备注
Accepted by IJCAI2022