基于Transformer的连续手语序列分割
计算机视觉与模式识别
2026-05-27 v5 人工智能
摘要
本工作致力于解决连续手语分割问题，这是手语翻译和数据标注的关键任务。我们提出一种基于Transformer的架构，建模手语的时序动态特性，将分割任务建模为序列标注问题，采用Begin-In-Out (BIO)标记方案。方法利用HaMeR手部特征，并辅以3D角度。大量实验表明，我们的方法在DGS语料库上实现了最先进的结果，同时我们的方法在BSLCorpus上的特征也超越了先前的基准。
关键词
引用
@article{arxiv.2504.08593,
title = {Hands-On: Segmenting Individual Signs from Continuous Sequences},
author = {JianHe Low and Harry Walsh and Ozge Mercanoglu Sincan and Richard Bowden},
journal= {arXiv preprint arXiv:2504.08593},
year = {2026}
}
备注
Accepted in the 19th IEEE International Conference on Automatic Face and Gesture Recognition. Code Implementation Released