中文

从多类神经网络中重构训练数据

机器学习 2023-05-08 v1 密码学与安全 计算机视觉与模式识别

摘要

从训练好的神经网络的训练集中重构样本是一项重大的隐私担忧。Haim 等人(2022)最近基于关于梯度方法隐式偏置的理论结果,展示了从神经网络二分类器中重构训练样本的可能性。在本工作中,我们针对该先前工作提出了若干改进与新见解。作为主要改进,我们展示了训练数据重构在多类设定下是可行的,且重构质量甚至高于二分类情形。此外,我们展示了在训练中使用权重衰减会增加对样本重构的脆弱性。最后,先前工作的训练集规模至多来自 1010 个类的 10001000 个样本,而我们给出了从在 100100 个类的 50005000 个样本上训练的模型中重构的初步证据。

关键词

引用

@article{arxiv.2305.03350,
  title  = {Reconstructing Training Data from Multiclass Neural Networks},
  author = {Gon Buzaglo and Niv Haim and Gilad Yehudai and Gal Vardi and Michal Irani},
  journal= {arXiv preprint arXiv:2305.03350},
  year   = {2023}
}