设备端 NLP 应用综合研究——VQA、自动表单填写、语言语码转换的智能回复
计算与语言
2024-10-01 v1 人工智能
机器学习
摘要
大语言模型的近期改进为以前不可能实现的设备端应用新体验打开了大门。在这项工作中，我们提出了 2 个类别中的 3 种此类新体验。首先，我们讨论了可以在屏幕理解中驱动的体验，即理解用户屏幕上的内容，即——（1）视觉问答，以及（2）基于先前屏幕的自动表单填写。可以扩展的第二类体验是智能回复，以支持语码转换的多语言使用者。当说话者在两种或多种语言之间交替时，就会发生语码转换。据我们所知，这是第一项提出这些任务及其各自解决方案的工作，旨在弥合设备端应用领域最新研究与研究在现实世界中影响之间的差距。
引用
@article{arxiv.2409.19010,
title = {A comprehensive study of on-device NLP applications -- VQA, automated Form filling, Smart Replies for Linguistic Codeswitching},
author = {Naman Goyal},
journal= {arXiv preprint arXiv:2409.19010},
year = {2024}
}