人人都能打手语了吗?探索基于二维姿态的手语视频生成
计算机视觉与模式识别
2021-01-05 v2 人工智能
摘要
近期工作已着手生成以人体关节的二维/三维坐标表示的手语人体姿态。我们利用深度学习中最先进的动作迁移方法,并在美国手语数据集 How2Sign 上进行评估,以在给定二维姿态骨架的条件下生成手语者表演手语的视频。我们从定量与定性两方面评估所生成的视频,结果表明由于手部细节的缺失,现有模型尚不足以生成令人满意的手语视频。
引用
@article{arxiv.2012.10941,
title = {Can Everybody Sign Now? Exploring Sign Language Video Generation from 2D Poses},
author = {Lucas Ventura and Amanda Duarte and Xavier Giro-i-Nieto},
journal= {arXiv preprint arXiv:2012.10941},
year = {2021}
}
备注
Video here: https://youtu.be/4ve1sGzWl2g