论句法分歧与零样本性能之间的关系
计算与语言
2021-10-12 v1 机器学习
摘要
我们探究了在翻译中句法关系被保留的程度与在零样本设定下正确构建解析树的难易程度之间的联系。尽管先前工作暗示了此种关系,但其往往聚焦于宏观层面而非单个边的层面——我们旨在填补这一空白。作为测试用例,我们以从英语到一组多样化语言的通用依存(Universal Dependencies, UD)解析迁移为例,进行了两组实验。在一组中,我们基于英语源边在翻译中被保留的程度来分析零样本性能。在另一组中,我们对 UD 应用三种受语言学驱动的变换,创建其更具跨语言稳定性的版本,并评估它们的零样本可解析性。为比较不同模式下的解析性能,我们在跨语言关系抽取(RE)下游任务上进行了外在评估,使用一份流行英语 RE 基准的子集翻译为俄语和韩语。在两组实验中,我们的结果均暗示跨语言稳定性与零样本解析性能之间存在强相关关系。
引用
@article{arxiv.2110.04644,
title = {On the Relation between Syntactic Divergence and Zero-Shot Performance},
author = {Ofir Arviv and Dmitry Nikolaev and Taelin Karidi and Omri Abend},
journal= {arXiv preprint arXiv:2110.04644},
year = {2021}
}
备注
Accepted to EMNLP 2021