Latent Compass:基于导航的创造
人工智能
2020-12-29 v1 计算机视觉与模式识别
摘要
在 Marius von Senden 的《Space and Sight》中,一位刚获得视力的盲人患者将角落的体验描述为类似柠檬的,因为角落像柠檬刺痛舌头一样“刺痛”视觉。在这里,刺痛感是感觉体验特征空间中的一个维度,是感知对象在两者交互处对感知者产生的影响。在刚获得视力者的叙述中,一种从某种交互中熟悉的影响被转化到了全新的语境中。感知作为泛化的载体,因为不同体验中共享的影响产生了基于这些体验的具体抽象。塞尚和后印象派画家精通体验转化的语言,他们认识到,要画出最能反映现实的具体形式,方法不是画他们所看到的,而是画“观看本身是什么样的”。我们设想了一个使用 AI 进行创造的未来,其中“观看本身是什么样的”是可复制的、可转移的、可操纵的——它是艺术家调色板的一部分,既立足于特定语境,又能超越该语境泛化。一个活跃的研究方向是将人类可解释的特征映射到 GAN 潜空间中的方向上。在嵌入空间中寻找预期方向或使用现成分类器来驱动图像操纵的监督和自监督方法,在它们能发现的特征多样性上受到限制。发现有用新方向的无监督方法表明,具有感知意义的方向空间远未被完全映射。由于该空间广阔且充满创造潜力,我们希望拥有方向发现工具,能够捕捉人类感知的丰富性和泛化能力。我们的方法将创作者置于实时工具使用过程中的发现循环中,以识别对他们具有感知意义的方向,并沿这些方向生成可解释的图像转换。
引用
@article{arxiv.2012.14283,
title = {Latent Compass: Creation by Navigation},
author = {Sarah Schwettmann and Hendrik Strobelt and Mauro Martino},
journal= {arXiv preprint arXiv:2012.14283},
year = {2020}
}
备注
3 pages, 2 figures, accepted at the 4th Workshop on Machine Learning for Creativity and Design at NeurIPS 2020