使用单个示例模仿图像到图像模型的功能
计算机视觉与模式识别
2024-12-10 v2
摘要
我们研究了通过观察输入-输出对来模仿图像到图像翻译模型功能的可能性。我们关注那些无法从头训练模型的情况，要么是因为训练数据不可用，要么是因为模型架构未知。例如，生物应用中的商业模型就是这种情况。由于这些模型的开发需要大量投资，其所有者通常对其保密，仅在公司网站或学术论文中透露少数几个输入-输出示例。令人惊讶的是，我们发现即使单个示例通常也足以学习模仿模型的功能，并且这可以通过简单的蒸馏方法实现。我们进行了一项广泛的消融研究，涵盖了多种模型架构、数据集和任务，以表征影响功能模仿脆弱性的因素，并就这种不良行为的原因提供了初步的理论讨论。
引用
@article{arxiv.2406.00828,
title = {Imitating the Functionality of Image-to-Image Models Using a Single Example},
author = {Nurit Spingarn-Eliezer and Tomer Michaeli},
journal= {arXiv preprint arXiv:2406.00828},
year = {2024}
}