基于 Transformer 树解码器的用户界面布局设计自动补全
人机交互
2020-01-16 v1 计算与语言
机器学习
摘要
在领域内开发自动化机制以辅助设计过程日益受到关注。本文聚焦于辅助图形用户界面（UI）布局设计这一应用开发中的关键任务。给定设计者已输入的部分布局，我们的模型通过学习预测剩余 UI 元素的正确位置、尺寸以及层次结构来完成布局。此类自动化将显著减轻 UI 设计者与开发者的工作负担。虽然我们关注界面布局预测，但我们的模型可普遍适用于其他涉及树结构与二维放置的布局预测问题。具体而言，我们设计了两个基于 Transformer 的树解码器版本：Pointer 与 Recursive Transformer，并在一个公开数据集上对这些模型进行了实验。我们还提出了若干用于度量树预测准确性的指标，并将这些指标扎根于用户体验领域。这些工作为深度学习研究贡献了一项新任务与方法。
引用
@article{arxiv.2001.05308,
title = {Auto Completion of User Interface Layout Design Using Transformer-Based Tree Decoders},
author = {Yang Li and Julien Amelot and Xin Zhou and Samy Bengio and Si Si},
journal= {arXiv preprint arXiv:2001.05308},
year = {2020}
}