ChatGPT，让我们聊聊手语：实验、架构要素、挑战与研究趋势
计算与语言
2024-01-17 v1 人工智能
摘要
ChatGPT 是一种基于生成式AI的语言模型。现有的关于 ChatGPT 的研究工作集中在其在各个领域的应用。然而，其在手语翻译（SLT）方面的潜力尚待探索。本文填补了这一空白。因此，我们呈现了 GPT 的演进历程，旨在对其面向 SLT 的架构改进进行回顾性分析。我们探索了 ChatGPT 在翻译不同手语方面的能力，为聋人和听障群体铺平了更好的无障碍沟通之路。我们的实验结果表明，ChatGPT 只需一次提示迭代，即可准确地将英语翻译为美国手语（ASL）、澳大利亚手语（AUSLAN）和英国手语（BSL），以及将阿拉伯手语（ArSL）翻译为英语。然而，该模型未能将阿拉伯语翻译为 ArSL，也未能将 ASL、AUSLAN 和 BSL 翻译为阿拉伯语。据此，我们提出了挑战，并为未来的研究方向提炼了见解。
引用
@article{arxiv.2401.06804,
title = {ChatGPT, Let us Chat Sign Language: Experiments, Architectural Elements, Challenges and Research Directions},
author = {Nada Shahin and Leila Ismail},
journal= {arXiv preprint arXiv:2401.06804},
year = {2024}
}