DeepPortraitDrawing：从手绘草图生成人体图像
计算机视觉与模式识别
2022-05-23 v2
摘要
研究者已探索多种从手绘草图生成逼真图像的方法，例如针对物体与人脸。然而，如何从草图生成逼真的人体图像仍具挑战性。首先是因为对人体形状的敏感性，其次是因为由体型与姿态变化引起的人体图像复杂性，第三是因为逼真图像与手绘草图之间的域差距。本工作中，我们提出DeepPortraitDrawing，一种将粗略绘制的草图转换为逼真人体图像的深度生成框架。为编码不同姿态下的复杂体型，我们采用局部到全局的方法。在局部，我们使用语义部件自编码器构建部件级形状空间，用于细化输入预分割手绘草图的几何结构。在全局，我们采用级联空间变换网络通过调整身体部件的空间位置与相对比例来细化其结构。最后，我们使用全局合成网络完成草图到图像的转换任务，并使用人脸细化网络增强面部细节。大量实验表明，给定粗略草绘的人像，我们的方法比最先进的草图到图像合成技术生成更逼真的图像。
引用
@article{arxiv.2205.02070,
title = {DeepPortraitDrawing: Generating Human Body Images from Freehand Sketches},
author = {Xian Wu and Chen Wang and Hongbo Fu and Ariel Shamir and Song-Hai Zhang and Shi-Min Hu},
journal= {arXiv preprint arXiv:2205.02070},
year = {2022}
}