Soundify：将音效与视频匹配
声音
2024-06-26 v4 计算机视觉与模式识别
人机交互
多媒体
音频与语音处理
摘要
在视频编辑艺术中，声音有助于为对象增添特质，并使观众沉浸于空间之中。通过对专业编辑人员（N=10）的成形性访谈，我们发现为视频添加声音的任务可能具有挑战性。本文呈现 Soundify，一个协助编辑将声音与视频匹配的系统。给定一段视频，Soundify 识别匹配声音，将声音与视频同步，并动态调整声像与音量以创建空间音频。在一项人类评估研究（N=889）中，我们表明 Soundify 能够为多样化的音频类别开箱即用地将声音与视频匹配。在一项受试者内专家研究（N=12）中，我们展示了 Soundify 在以轻量工作负荷、缩短任务完成时间和改善可用性来帮助视频编辑匹配声音与视频方面的有用性。
引用
@article{arxiv.2112.09726,
title = {Soundify: Matching Sound Effects to Video},
author = {David Chuan-En Lin and Anastasis Germanidis and Cristóbal Valenzuela and Yining Shi and Nikolas Martelaro},
journal= {arXiv preprint arXiv:2112.09726},
year = {2024}
}
备注
https://soundify.cc