基于自然语言指令的自动化图像编辑系统
计算与语言
2018-12-05 v1
摘要
本工作提出利用自然语言书写指令在图像编辑程序中修改图像的任务。我们利用通过众包收集的超过 6000 条图像编辑文本请求语料来更改真实世界图像。描述了一种由动作与实体组成的新颖框架,用于将用户的自然语言请求映射为图像编辑程序中的可执行命令。我们通过投票过程解决了先前标注者之间的标注分歧,并完成了该语料的标注。我们尝试了不同的机器学习模型,发现 LSTM、SVM 以及双向 LSTM-CRF 联合模型在给定话语中检测图像编辑动作及相关实体方面表现最佳。
引用
@article{arxiv.1812.01083,
title = {A System for Automated Image Editing from Natural Language Commands},
author = {Jacqueline Brixey and Ramesh Manuvinakurike and Nham Le and Tuan Lai and Walter Chang and Trung Bui},
journal= {arXiv preprint arXiv:1812.01083},
year = {2018}
}