基于深度学习的多模态方法预测电影预告片年龄适宜等级案例研究
机器学习
2021-01-29 v1 多媒体
声音
音频与语音处理
图像与视频处理
摘要
在本工作中，我们探索了针对电影预告片自动年龄适宜等级评定问题中融合多模态的不同方法。首先，我们引入了一个新数据集，包含从 IMDB 和 YouTube 下载的英文电影预告片视频及其相应的年龄适宜等级标签。其次，我们提出了一种解决电影预告片年龄适宜性评级问题的多模态深度学习流水线。这是首次尝试将该问题中的视频、音频和语音信息相结合，并且我们的实验结果表明，多模态方法在此任务中显著优于最佳的单一模态与双模态模型。
引用
@article{arxiv.2101.11704,
title = {A Case Study of Deep Learning Based Multi-Modal Methods for Predicting the Age-Suitability Rating of Movie Trailers},
author = {Mahsa Shafaei and Christos Smailis and Ioannis A. Kakadiaris and Thamar Solorio},
journal= {arXiv preprint arXiv:2101.11704},
year = {2021}
}