基于自然语言指令的交互式图像操控
计算机视觉与模式识别
2018-02-26 v1
摘要
我们提出一种带自然语言指令的交互式图像操控系统,该系统能从源图像和描述源图像与目标图像差异的指令生成目标图像。该系统可交互式修改生成图像,并使以自然语言为条件的图像生成更具可控性。我们构建了一个神经网络,在潜空间处理图像向量,利用指令向量将源向量变换为目标向量。实验结果表明,所提框架利用源图像和操控指令在我们的数据集上成功生成了目标图像。
引用
@article{arxiv.1802.08645,
title = {Interactive Image Manipulation with Natural Language Instruction Commands},
author = {Seitaro Shinagawa and Koichiro Yoshino and Sakriani Sakti and Yu Suzuki and Satoshi Nakamura},
journal= {arXiv preprint arXiv:1802.08645},
year = {2018}
}
备注
accepted at NIPS 2017 ViGIL workshop (https://nips2017vigil.github.io/)