基于深度自编码器的从图形截图自动生成代码
机器学习
2020-07-08 v1 计算机视觉与模式识别
摘要
在软件前端开发中,将图形用户界面(GUI)图像转换为相应前端代码的工作是一项不可避免的繁琐工作。已有一些尝试使该工作自动化。然而,由于缺乏注意力机制引导,这些模型生成的 GUI 代码不够准确。为解决此问题,我们提出了基于人工监督注意力机制的 PixCoder。该方法训练神经网络预测输入 GUI 图像中的样式表,然后输出一个向量。PixCoder 根据输出向量生成面向特定平台的 GUI 代码。实验结果表明,PixCoder 生成的 GUI 代码准确率超过 95%。
引用
@article{arxiv.2007.02272,
title = {Automatically Generating Codes from Graphical Screenshots Based on Deep Autocoder},
author = {Xiaoling Huang and Feng Liao},
journal= {arXiv preprint arXiv:2007.02272},
year = {2020}
}