FOLEY-VAE：基于人工智能的电影音效生成
音频与语音处理
2023-10-25 v1 声音
摘要
在本研究中，我们提出一种基于变分自编码器的界面，该编码器使用广泛的自然声音训练，用于创新性地创作Foley音效。模型可将新的声音特征实时迁移至预录音频或麦克风捕获的语音。此外，它允许对潜变量进行交互式修改，便于精确且定制化的艺术调整。以我们去年在同一会议发表的关于变分自编码器的前期研究为起点，我们分析了一种已有实现：RAVE[1]。该模型经专门训练用于音效制作。我们成功生成了多种音效，包括电磁、科幻和水声等，其他音效随本工作一并发布。这一创新方法是一部由人工智能辅助音效的西班牙短片的艺术创作基础。这一里程碑切实说明了该技术在电影产业中的变革潜力，为声音创作的新可能及电影制作艺术质量的提升打开了大门。
引用
@article{arxiv.2310.15663,
title = {FOLEY-VAE: Generaci\'on de efectos de audio para cine con inteligencia artificial},
author = {Mateo Cámara and José Luis Blanco},
journal= {arXiv preprint arXiv:2310.15663},
year = {2023}
}
备注
9 pages, in Spanish, Tecniac\'ustica