一种从文本描述生成图形布局的先解析后放置方法

创建布局是图形设计中的基础步骤。本工作中，我们提出使用文本作为指导来创建图形布局，即文本到布局（Text-to-Layout），旨在降低设计门槛。文本到布局是一项具有挑战性的任务，因为它需要考虑文本中隐含的、组合性的和不完整的布局约束，而每一项在先前工作中均未被研究。为此，我们提出一个名为先解析后放置的两阶段方法。该方法在文本与布局之间引入一种中间表示（IR）来表达多样布局约束。借助 IR，文本到布局被分解为解析阶段与放置阶段。解析阶段以文本描述为输入并生成 IR，其中文本中的隐含约束被转化为显式约束。放置阶段基于 IR 生成布局。为建模组合性与不完整的约束，我们使用基于 Transformer 的布局生成模型，并精心设计了将约束与布局表示为序列的方式。此外，我们采用先预训练后微调策略，利用大规模无标注布局提升布局生成模型性能。为评估我们的方法，我们构建了两个文本到布局数据集并在其上开展实验。定量结果、定性分析与用户研究均证明了我们方法的有效性。