肯尼亚手势语言（KSL）数据集：运用人工智能技术弥合哑学学习者之间的沟通障碍

肯尼亚手势语言（KSL）是肯尼亚哑人社区的主要语言。它是从幼儿园一年级到大学阶段哑学学习者教育与学习成就的教学语言。肯尼亚手势语言用于哑人之间的社交交往、表达需求、提出请求以及一般性沟通。然而，哑人与听力人士之间存在语言障碍。因此，针对KSL的人工智能创新（AI4KSL）是消除沟通障碍的关键。针对KSL的人工智能技术是一项为期两年（2023-2024年）的研究项目，旨在创建针对肯尼亚哑人社区代表性样本的自发及elicited数据的数字开放式人工智能系统。本研究旨在开发将英文翻译为KSL的人工智能辅助技术数据集，以促进肯尼亚哑学学习者的包容性与跨语言障碍。具体目标包括：构建用于英语语音与视频录制的肯尼亚手势语言数据集，并构建将KSL手势转录为语音学水平界面。本文描述了构建数据集的方法。数据来自48名哑学学习者的教师和 tutors，以及400名哑学学习者。参与者主要通过朗读和演唱进行手势语言elicitation任务。数据集结果包括约14,000个英文句子，对应KSL gloss，来自约4000个单词的池子，以及约20,000个录制的KSL视频，要么为手势单词，要么为句子。第二层数据结果包括10,000个分割且分段的KSL视频。数据集的第三项成果为4,000个转录单词，按照HamNoSys系统分为五个语义参数。