中文

面向多模态大语言模型的对抗式视觉概念忘却:AUVIC

计算机视觉与模式识别 2025-11-17 v1 人工智能

摘要

多模态大语言模型(MLLMs)在大规模数据集上优化后能实现惊人的性能。此类数据集常常包含敏感或受版权保护的内容,引发显著的数据隐私问题。要求遵守“被遗忘权”的监管框架推动了机器忘却的需求。该技术允许在不耗费资源进行重新训练的情况下删除目标数据。然而,尽管对文本已有深入研究,视觉概念在 MLLMs 中的忘却仍鲜有探索。一个主要挑战是精确移除目标视觉概念而不干扰相关实体的性能。为此,我们引入 AUVIC,一种面向 MLLMs 的新颖视觉概念忘却框架。AUVIC 采用对抗扰动以实现精确忘却。该方法有效地隔离目标概念,同时避免对类似实体的意外影响。为评估我们的方法,构建了 VCUBench。这是第一个旨在评估组上下文中视觉概念忘却的基准。实验结果表明,AUVIC 在目标忘却率上实现了最先进水平,同时对非目标概念的性能影响最小。

关键词

引用

@article{arxiv.2511.11299,
  title  = {AUVIC: Adversarial Unlearning of Visual Concepts for Multi-modal Large Language Models},
  author = {Haokun Chen and Jianing Li and Yao Zhang and Jinhe Bi and Yan Xia and Jindong Gu and Volker Tresp},
  journal= {arXiv preprint arXiv:2511.11299},
  year   = {2025}
}

备注

AAAI 2026. Code: https://github.com/HaokunChen245/AUVIC