VEMOCLAP：一个视频情感分类网页应用
计算机视觉与模式识别
2024-10-30 v1 人工智能
机器学习
多媒体
图像与视频处理
摘要
我们介绍VEMOCLAP：使用预训练特征的视频情感分类器，这是第一个现成可用且开源的网页应用，用于分析用户提供的任何视频的情感内容。我们改进了先前的工作，该工作利用在视频帧和音频上运行的开源预训练模型，然后使用多头交叉注意力高效融合得到的预训练特征。我们的方法在Ekman-6视频情感数据集上将最先进的分类准确率提高了4.3%，并提供了一个在线应用，供用户在我们的模型上运行他们自己的视频或YouTube视频。我们邀请读者访问serkansulun.com/app试用我们的应用。
引用
@article{arxiv.2410.21303,
title = {VEMOCLAP: A video emotion classification web application},
author = {Serkan Sulun and Paula Viana and Matthew E. P. Davies},
journal= {arXiv preprint arXiv:2410.21303},
year = {2024}
}
备注
Accepted to 2024 IEEE International Symposium on Multimedia (ISM), Tokyo, Japan