Scones：面向草图对话式创作的混合主动系统
人机交互
2020-05-19 v1 机器学习
摘要
迭代式细化与批评草图是发展有效设计的关键步骤。我们介绍 Scones，一个由机器学习驱动的混合主动系统，使用户能从文本指令迭代创作草图。Scones 是一种基于深度学习的新颖系统，从自然语言迭代生成由语义规范组合的草图对象场景。Scones 在基于文本的场修改任务上超越 SOTA 性能，并引入了一种掩码条件草图模型，能根据高层场景信息指定的姿态生成草图。在一项对 Scones 的探索性用户评估中，参与者表示享受与 Scones 的迭代绘图任务，并提出了用于进一步应用的附加功能。我们认为 Scones 是迈向自动化智能系统的早期一步，支持人在回路应用，通过草图在艺术与设计中交流创意。
引用
@article{arxiv.2005.07781,
title = {Scones: Towards Conversational Authoring of Sketches},
author = {Forrest Huang and Eldon Schoop and David Ha and John Canny},
journal= {arXiv preprint arXiv:2005.07781},
year = {2020}
}
备注
Long Paper, IUI '20: Proceedings of the 25th International Conference on Intelligent User Interfaces