中文

正则化有助于缓解投毒攻击:基于 Wasserstein 距离的分布鲁棒机器学习

机器学习 2020-01-30 v1 密码学与安全 信号处理 最优化与控制 统计理论 机器学习 统计理论

摘要

我们利用分布鲁棒优化进行机器学习,以缓解数据投毒攻击的影响。我们在原始数据(不含投毒记录)上对所训练模型提供性能保证,方法是在以 Wasserstein 距离定义的、围绕经验分布(从受投毒攻击污染的训练集提取)的邻域上,针对最坏情形分布训练模型。我们通过基于经验样本平均适应度与适应度函数(给定模型参数下关于数据)Lipschitz 常数作为正则化项,寻找最坏情形适应度的上界,从而松弛该分布鲁棒机器学习问题。对于回归模型,我们证明该正则化项等于模型参数的对偶范数。我们使用 Wine Quality 数据集、Boston Housing Market 数据集与 Adult 数据集来展示本文结果。

关键词

引用

@article{arxiv.2001.10655,
  title  = {Regularization Helps with Mitigating Poisoning Attacks: Distributionally-Robust Machine Learning Using the Wasserstein Distance},
  author = {Farhad Farokhi},
  journal= {arXiv preprint arXiv:2001.10655},
  year   = {2020}
}