中文

利用动漫角色色彩设计表进行油漆桶上色

计算机视觉与模式识别 2024-10-28 v1

摘要

线稿上色在手绘动画制作中起着至关重要的作用,动画师通常借助角色色彩设计表中的 RGB 值,使用油漆桶工具手动为各个区域上色。这一过程通常被称为油漆桶上色,包含两个主要任务:关键帧上色(根据角色色彩设计表应用颜色)和连续帧上色(将这些颜色复制到相邻帧中)。当前的自动上色方法主要侧重于基于参考和基于区域匹配的方法。然而,基于参考的方法往往无法准确地为每个区域分配特定颜色,而基于匹配的方法仅限于连续帧上色,且在处理显著形变和遮挡等问题时存在困难。在本工作中,我们引入了包含关系匹配,使网络能够理解区域之间的包含关系,而非仅仅依赖直接的视觉对应。通过将该方法与区域解析和颜色形变模块相结合,我们的包含关系匹配流程显著提升了关键帧上色和连续帧上色的性能。为了支持网络训练,我们构建了一个名为 PaintBucket-Character 的独特数据集,其中包含各种 3D 角色的渲染线稿及其上色版本与阴影标注。为了复刻工业动画数据格式,我们还为每个角色创建了色彩设计表,包含每种颜色的语义信息及标准姿态参考图像。实验突出了本方法的优越性,展示了在我们提出的基准和手绘动画上均能实现准确且一致的上色。

关键词

引用

@article{arxiv.2410.19424,
  title  = {Paint Bucket Colorization Using Anime Character Color Design Sheets},
  author = {Yuekun Dai and Qinyue Li and Shangchen Zhou and Yihang Luo and Chongyi Li and Chen Change Loy},
  journal= {arXiv preprint arXiv:2410.19424},
  year   = {2024}
}

备注

Extension of arXiv:2403.18342; Project page at https://github.com/ykdai/BasicPBC