REACT2023：首届多模态多重恰当面部反应生成挑战赛
计算机视觉与模式识别
2023-06-13 v1
摘要
多模态多重恰当面部反应生成挑战赛（REACT2023）是首个聚焦于评估多媒体处理与机器学习技术、以在各种双人交互场景中生成人类恰当面部反应的竞赛活动，所有参与者均在严格相同的条件下竞争。该挑战赛旨在为多模态信息处理提供首个基准测试集，并促进音频、视觉及音视觉情感计算社区之间的协作，以比较不同自发双人交互条件下自动恰当面部反应生成方法的相对优劣。本文介绍了：(i) REACT2023挑战赛的新颖性、贡献与指南；(ii) 挑战赛所使用的数据集；以及 (iii) 基线系统在所提出的两个子挑战上的表现：分别为离线多重恰当面部反应生成与在线多重恰当面部反应生成。挑战赛基线代码公开于 \url{https://github.com/reactmultimodalchallenge/baseline_react2023}。
引用
@article{arxiv.2306.06583,
title = {REACT2023: the first Multi-modal Multiple Appropriate Facial Reaction Generation Challenge},
author = {Siyang Song and Micol Spitale and Cheng Luo and German Barquero and Cristina Palmero and Sergio Escalera and Michel Valstar and Tobias Baur and Fabien Ringeval and Elisabeth Andre and Hatice Gunes},
journal= {arXiv preprint arXiv:2306.06583},
year = {2023}
}