中文

一种利用超常刺激行为进行基于视频的神经多样性分类的新数据集

计算机视觉与模式识别 2025-08-25 v2

摘要

不同个体在对外部刺激做出反应时,其面部表情和动作在强度上存在差异,这在神经多样性个体中尤为明显。此类行为影响人们在整体健康、沟通和感官处理方面。可以负责任地利用深度学习来提高处理此任务的效率,并帮助医疗专业人员准确理解此类行为。在这项工作中,我们引入了 Video ASD 数据集——一个包含视频帧卷积和注意力图特征数据的数据集——以促进 ASD 分类任务的进一步发展。与许多近期使用 MRI 数据进行 ASD 分类的研究不同,后者需要昂贵的专用设备,我们的方法利用功能强大但相对实惠的 GPU、标准计算机设置和摄像机进行推理。结果表明,我们的模型有效地泛化并理解了儿童独特动作的关键差异。此外,我们在此数据上测试了基础模型,以展示运动噪声如何影响性能,以及对更多数据和更复杂标签的需求。

关键词

引用

@article{arxiv.2409.04598,
  title  = {A Novel Dataset for Video-Based Neurodivergent Classification Leveraging Extra-Stimulatory Behavior},
  author = {Manuel Serna-Aguilera and Xuan Bac Nguyen and Han-Seok Seo and Khoa Luu},
  journal= {arXiv preprint arXiv:2409.04598},
  year   = {2025}
}