绘画的诞生:可微分笔触重建
计算机视觉与模式识别
2025-11-18 v1
摘要
绘画是一种独特的视觉叙事形式,其中创作过程的意义与最终艺术品等同。尽管近期发展在生成模型方面实现了视觉上令人信服的绘画合成,但大多数现有方法仅关注最终图像生成或基于补丁的过程模拟,缺乏明确的笔触结构,无法产生光滑、逼真的阴影。本文提出了一种可微分笔触重建框架,统一了绘画、风格化纹理和烙印,以忠实再现人类绘画-烙印循环。给定输入图像后,本框架通过平行可微分绘画渲染器优化单色与双色贝塞尔笔触,然后通过风格生成模块在多样化的绘画风格中合成几何条件纹理。进一步引入可微分烙印算子,以实现自然的颜色混合和阴影。结合粗到细优化策略,本方法在几何与语义指导下联合优化笔触几何、颜色和纹理。广泛的在油画、水彩画、墨画和数字绘画上的实验表明,我们的方法能够产生逼真且富有表现力的笔触重建、光滑的色调过渡和丰富多彩的风格化外观,为表达的数字绘画创作提供了一个统一模型。更多演示请参见我们的项目页面:https://yingjiang96.github.io/DiffPaintWebsite/。
引用
@article{arxiv.2511.13191,
title = {Birth of a Painting: Differentiable Brushstroke Reconstruction},
author = {Ying Jiang and Jiayin Lu and Yunuo Chen and Yumeng He and Kui Wu and Yin Yang and Chenfanfu Jiang},
journal= {arXiv preprint arXiv:2511.13191},
year = {2025}
}
备注
13 pages