LUIVITON:学习型通用可互操作虚拟试穿
计算机视觉与模式识别
2026-05-18 v2
摘要
为了实现现实世界3D资产的大规模重用,其中服装和角色很少共享骨架、模板或密集对应关系,我们提出了一种全自动虚拟试穿系统,可以将复杂的多层服装穿到各种任意姿态的类人模型上。我们的核心思想是使用SMPL作为中间代理,并将服装到身体的迁移分解为两个具有不同挑战的对应任务:(1)服装到SMPL(部分到完整的对齐)和(2)身体到SMPL(大的姿态/形状变化和风格化)。我们使用几何驱动的对应模型处理服装到SMPL的任务,并引入一种基于扩散的身体到SMPL对应方法,该方法利用多视图一致的外观特征以及预训练的2D基础模型。利用这些对应关系,我们将SMPL/SMPL+D(位移)配准到服装和目标身体,然后通过沿着平滑的SMPL到SMPL+D过渡迁移服装来执行模拟器驱动的拟合,从而在目标上产生物理上合理的悬垂效果。我们的系统可以处理复杂的服装拓扑(包括非流形网格),并泛化到各种拟人角色(例如,人类、机器人、卡通和生物),同时保持计算上的实用性。在悬垂完成后,我们的系统还支持快速的服装尺寸定制。我们展示了,即使在没有2D服装缝纫图案的情况下,我们的系统也能在无需任何人工劳动的情况下产生高质量的3D服装拟合。我们的项目页面是:https://cao-cong0.github.io/LUIVITON-Learned-Universal-Interoperable-VIrtual-Try-ON/。
引用
@article{arxiv.2509.05030,
title = {LUIVITON: Learned Universal Interoperable VIrtual Try-ON},
author = {Cong Cao and Xianhang Cheng and Jingyuan Liu and Yujian Zheng and Zhenhui Lin and Ren Li and Meriem Chkir and Hao Li},
journal= {arXiv preprint arXiv:2509.05030},
year = {2026}
}