中文

通过半反向传播将对抗扰动加速 50%

机器学习 2022-11-10 v1 最优化与控制

摘要

对抗扰动在对抗鲁棒性领域中起着重要作用,其求解的是关于输入数据的最大化问题。我们表明,如果我们仅在反向传播期间计算输出梯度而不计算参数梯度,则此类优化的反向传播可加速 2×2\times(因此包括前向传播在内的整体优化可加速 1.5×1.5\times),且没有任何效用下降。

关键词

引用

@article{arxiv.2211.04973,
  title  = {Accelerating Adversarial Perturbation by 50% with Semi-backward Propagation},
  author = {Zhiqi Bu},
  journal= {arXiv preprint arXiv:2211.04973},
  year   = {2022}
}