中文

DeformTrace:用于时序伪造定位的可变形状态空间模型及中继标记

计算机视觉与模式识别 2026-03-06 v1 人工智能 多媒体

摘要

时序伪造定位(TFL)旨在精准识别视频和音频中被操纵的片段,为安防和取证提供强大的可解释性。虽然近期的状态空间模型(SSMs)在精准时序推理方面表现出色,但其在TFL中的应用受到边界模糊、稀疏伪造以及有限的长程建模等问题的制约。我们提出DeformTrace,通过可变形动力学和中继机制增强SSMs,以应对上述挑战。具体而言,Deformable Self-SSM(DS-SSM)引入动态感受野到SSMs中,以实现精准的时序定位。为进一步提升时序推理能力并缓解长程衰减,嵌入Relay Token机制于DS-SSM中。此外,Deformable Cross-SSM(DC-SSM)将全局状态空间划分为查询特定的子空间,减少非伪造信息的累积,提升对稀疏伪造的灵敏度。这些组件被集成到一种混合架构中,该架构结合Transformer的全局建模能力与SSMs的高效性。大量实验表明,DeformTrace以更少的参数、更快的推理速度和更强的鲁棒性实现了最新的性能。

关键词

引用

@article{arxiv.2603.04882,
  title  = {DeformTrace: A Deformable State Space Model with Relay Tokens for Temporal Forgery Localization},
  author = {Xiaodong Zhu and Suting Wang and Yuanming Zheng and Junqi Yang and Yangxu Liao and Yuhong Yang and Weiping Tu and Zhongyuan Wang},
  journal= {arXiv preprint arXiv:2603.04882},
  year   = {2026}
}

备注

9 pages, 4 figures, accepted by AAAI 2026