Magic Layouts：用于用户界面设计中组件检测的结构先验
计算机视觉与模式识别
2021-06-15 v1 人机交互
机器学习
摘要
我们提出 Magic Layouts；一种用于解析用户界面（UI）布局截图或手绘草图的方法。我们的核心贡献是扩展现有检测器以利用针对 UI 设计学习到的结构先验，从而实现 UI 组件（按钮、文本框及类似元素）的鲁棒检测。具体而言，我们学习了移动端 UI 布局上的先验，编码不同 UI 组件间常见的空间共现关系。利用该先验对区域提议进行条件化，在手绘 UI 与应用截图上的 UI 布局解析均带来性能提升，我们在一个用于快速获取用户体验（UX）设计数字原型的交互式应用背景下展示了这一点。
引用
@article{arxiv.2106.07615,
title = {Magic Layouts: Structural Prior for Component Detection in User Interface Designs},
author = {Dipu Manandhar and Hailin Jin and John Collomosse},
journal= {arXiv preprint arXiv:2106.07615},
year = {2021}
}
备注
CVPR 2021