究竟是谁的妻子？评估机器翻译中对同性关系的偏见

机器翻译常常受到有偏数据和算法的影响，可能导致系统输出中出现不可接受的错误。虽然性别规范方面的偏见已得到研究，但对于机器翻译系统是否编码了关于社会关系的偏见，例如“律师亲吻了她的妻子”，人们所知甚少。我们使用从几种名词性别语言（例如西班牙语）中抽取的、由常见职业名词构成的生成模板句，研究了机器翻译系统中对同性关系偏见的程度。我们发现，三种流行的机器翻译服务在准确翻译涉及同性别实体间关系的句子时，始终表现不佳。错误率因上下文而异，且涉及高女性代表性职业的同性别句子翻译准确度较低。我们提供这项工作，作为评估自然语言处理系统在社会关系方面内在偏见的一个案例研究。