InstructHumans:基于指令的动画3D人体纹理编辑框架
计算机视觉与模式识别
2026-03-06 v2 多媒体
摘要
我们提出了InstructHumans,这是一个新颖的框架,用于指令驱动的可动画3D人体纹理编辑。现有的基于文本的3D编辑方法通常直接应用评分蒸馏抽样(SDS)。SDS虽为生成任务所设计,却无法考虑编辑的核心要求——保持与源头像的一致性。本文表明,盲目使用SDS会损害编辑效果,因其可能破坏一致性。我们提出了用于编辑的修改SDS(SDS-E),该方法在扩散时间步中选择性地整合SDS的子项。我们进一步通过空间平滑正则化和基于梯度的视点采样来增强SDS-E,以实现锐利且高保真的细节编辑。将SDS-E集成到3D人体纹理编辑框架中后,我们超越了现有的3D编辑方法。我们的头像忠实地反映文本编辑内容,同时保持与原始头像的一致性。项目页面:https://jyzhu.top/instruct-humans/。
引用
@article{arxiv.2404.04037,
title = {InstructHumans: Editing Animated 3D Human Textures with Instructions},
author = {Jiayin Zhu and Linlin Yang and Angela Yao},
journal= {arXiv preprint arXiv:2404.04037},
year = {2026}
}
备注
Accepted for publication in IEEE Transactions on Multimedia (TMM), 2025