SPACT18：具有互补 RGB 与热成像模态的脉冲人体动作识别基准数据集
计算机视觉与模式识别
2025-07-23 v1 人工智能
摘要
脉冲相机是仿生视觉传感器，通过在每个像素处累积光强度异步发射脉冲，提供超高的能效和卓越的时间分辨率。与记录光强度变化以捕捉运动的事件相机不同，脉冲相机提供更精细的时空分辨率以及对连续变化更精确的表示。在本文中，我们介绍了首个使用脉冲相机的视频动作识别（VAR）数据集，并辅以同步的 RGB 和热成像模态，以为脉冲神经网络（SNN）提供全面的基准测试。通过保留脉冲数据固有的稀疏性和时间精度，我们的三个数据集为探索多模态视频理解提供了一个独特的平台，并作为直接比较脉冲、热成像和 RGB 模态的宝贵资源。这项工作贡献了一个新颖的数据集，将推动节能、超低功耗视频理解的研究，特别是针对使用脉冲数据的动作识别任务。
引用
@article{arxiv.2507.16151,
title = {SPACT18: Spiking Human Action Recognition Benchmark Dataset with Complementary RGB and Thermal Modalities},
author = {Yasser Ashraf and Ahmed Sharshar and Velibor Bojkovic and Bin Gu},
journal= {arXiv preprint arXiv:2507.16151},
year = {2025}
}