中文

EPIC-KITCHENS-100 动作识别无监督域适应挑战赛 2021:M3EM 团队技术报告

计算机视觉与模式识别 2021-07-02 v3

摘要

在本报告中,我们描述了提交至 2021 年 EPIC-KITCHENS-100 动作识别无监督域适应挑战赛的技术细节。利用多种模态已被证明有益于无监督域适应(UDA)任务。本工作中,我们提出多模态互增强模块(M3EM),一种联合考虑多模态信息以寻找跨域最具可迁移表示的深度模块。我们通过实现两个子模块来增强各模态并利用其他模态的上下文实现此目标。第一个子模块通过语义空间跨模态交换信息,第二个子模块基于所有模态的共识寻找最具可迁移的空间区域。

关键词

引用

@article{arxiv.2106.10026,
  title  = {EPIC-KITCHENS-100 Unsupervised Domain Adaptation Challenge for Action Recognition 2021: Team M3EM Technical Report},
  author = {Lijin Yang and Yifei Huang and Yusuke Sugano and Yoichi Sato},
  journal= {arXiv preprint arXiv:2106.10026},
  year   = {2021}
}