MarioNette:自监督精灵学习
计算机视觉与模式识别
2021-10-22 v2
摘要
艺术家和视频游戏设计者常使用精灵库——物体与角色的纹理贴片——来构建 2D 动画。我们提出一种深度学习方法,以自监督方式将基于精灵的视频动画分解为重复图形元素的解耦表示。通过联合学习一个可能透明的贴片字典并训练一个将其放置于画布上的网络,我们将基于精灵的内容解构为稀疏、一致且显式的表示,可轻松用于编辑或分析等下游任务。我们的框架为在无监督情况下发现图像集合中的重复视觉模式提供了一种有前景的方法。
引用
@article{arxiv.2104.14553,
title = {MarioNette: Self-Supervised Sprite Learning},
author = {Dmitriy Smirnov and Michael Gharbi and Matthew Fisher and Vitor Guizilini and Alexei A. Efros and Justin Solomon},
journal= {arXiv preprint arXiv:2104.14553},
year = {2021}
}
备注
Accepted to NeurIPS 2021