迈向可控且真实感的区域级图像操控
计算机视觉与模式识别
2021-08-20 v1
摘要
自适应且灵活的图像编辑是现代生成模型的一项理想功能。本工作中，我们提出一种带自动编码器架构的生成模型，用于逐区域风格操控。我们施加码一致性损失以强制内容与风格隐表示之间的显式解耦，使生成样本的内容与风格同其对应的内容与风格参考一致。该模型还受内容对齐损失约束，以确保前景编辑不会干扰背景内容。因此，给定用户提供的感兴趣区域掩码，我们的模型支持前景区域级风格迁移。特别地，除自监督外，我们的模型不接收如语义标签等额外标注。大量实验显示了所提方法的有效性，并展现了所提模型在区域级风格编辑、隐空间插值、跨域风格迁移等多种应用中的灵活性。
引用
@article{arxiv.2108.08674,
title = {Towards Controllable and Photorealistic Region-wise Image Manipulation},
author = {Ansheng You and Chenglin Zhou and Qixuan Zhang and Lan Xu},
journal= {arXiv preprint arXiv:2108.08674},
year = {2021}
}