WordArt Designer:基于大语言模型的用户驱动艺术字体合成
计算与语言
2023-11-28 v2 人工智能
计算机视觉与模式识别
图形学
摘要
本文介绍 WordArt Designer,一种依赖大语言模型(LLM)的用户驱动艺术字体合成框架。该系统包含四个关键模块:LLM 引擎、SemTypo、StyTypo 和 TexTypo 模块。1)LLM 引擎由 LLM(如 GPT-3.5)赋能,解读用户输入并为其他模块生成可操作提示,从而将抽象概念转化为具体设计。2)SemTypo 模块利用语义概念优化字体设计,在艺术化变换与可读性之间取得平衡。3)基于 SemTypo 模块提供的语义布局,StyTypo 模块生成平滑、精致的图像。4)TexTypo 模块通过纹理渲染进一步增强设计美感,实现富有创意的纹理字体生成。值得注意的是,WordArt Designer 突出了生成式 AI 与艺术字体的融合。可在 ModelScope 体验其功能:https://www.modelscope.cn/studios/WordArt/WordArt。
引用
@article{arxiv.2310.18332,
title = {WordArt Designer: User-Driven Artistic Typography Synthesis using Large Language Models},
author = {Jun-Yan He and Zhi-Qi Cheng and Chenyang Li and Jingdong Sun and Wangmeng Xiang and Xianhui Lin and Xiaoyang Kang and Zengke Jin and Yusen Hu and Bin Luo and Yifeng Geng and Xuansong Xie and Jingren Zhou},
journal= {arXiv preprint arXiv:2310.18332},
year = {2023}
}
备注
Accepted by EMNLP 2023, 10 pages, 11 figures, 1 table, the system is at https://www.modelscope.cn/studios/WordArt/WordArt