中文

Dim-Krum:基于维度Krum聚合的联邦学习后门防御方法用于NLP

机器学习 2022-10-14 v1 密码学与安全

摘要

尽管联邦学习具有潜力,但已知其容易受到后门攻击。许多鲁棒的联邦聚合方法被提出以降低潜在的后门风险。然而,它们主要在计算机视觉领域得到验证。在本文中,我们发现NLP后门比CV后门更难防御,并提供了理论分析,表明恶意更新检测错误概率由相对后门强度决定。NLP攻击往往具有较小的相对后门强度,这可能导致鲁棒联邦聚合方法对NLP攻击失效。受理论结果的启发,我们可以选择一些具有较高后门强度的维度来解决这个问题。我们提出了一种新的联邦聚合算法Dim-Krum,用于NLP任务,实验结果验证了其有效性。

关键词

引用

@article{arxiv.2210.06894,
  title  = {Dim-Krum: Backdoor-Resistant Federated Learning for NLP with Dimension-wise Krum-Based Aggregation},
  author = {Zhiyuan Zhang and Qi Su and Xu Sun},
  journal= {arXiv preprint arXiv:2210.06894},
  year   = {2022}
}

备注

Accepted by Findings of EMNLP 2022