FlashFace:保持高保真身份的人像个性化
计算机视觉与模式识别
2026-02-02 v2
摘要
本工作提出了 FlashFace,一个实用工具,用户只需提供一张或几张参考人脸图像和一段文本提示,即可轻松地即时个性化自己的照片。我们的方法以更高保真度的身份保持和更好的指令遵循区别于现有的人像定制方法,这得益于两项细微设计。首先,我们将人脸身份编码为一系列特征图,而非像现有技术那样编码为单一图像 token,使模型能够保留更多参考人脸的细节(例如,疤痕、纹身和脸型)。其次,我们引入了一种解耦整合策略,以在文本到图像生成过程中平衡文本和图像引导,缓解参考人脸与文本提示之间的冲突(例如,将成年人个性化为“儿童”或“老人”)。大量实验结果证明了我们的方法在各种应用中的有效性,包括人像个性化、语言提示下的人脸替换、将虚拟角色变为真人等。项目页面:https://jshilong.github.io/flashface-page。
引用
@article{arxiv.2403.17008,
title = {FlashFace: Human Image Personalization with High-fidelity Identity Preservation},
author = {Shilong Zhang and Lianghua Huang and Xi Chen and Yifei Zhang and Zhi-Fan Wu and Yutong Feng and Wei Wang and Yujun Shen and Yu Liu and Ping Luo},
journal= {arXiv preprint arXiv:2403.17008},
year = {2026}
}
备注
Project Page:https://jshilong.github.io/flashface-page