中文

流匹配的二次几何:文本到图像合成的语义粒度对齐

计算机视觉与模式识别 2026-03-12 v1

摘要

本文分析了生成式微调的优化动力学。我们观察到,在 Flow Matching 框架下,标准的 MSE 目标可形式化为由动态演化的神经切向核(NTK)支配的二次型。这种几何视角揭示了潜在的数据相互作用矩阵,其中对角项代表独立样本的学习,非对角项编码异构特征之间的残余相关性。虽然标准训练在隐式地优化这些交叉项干扰,但并未进行显式控制;此外, prevailing 数据同质性假设可能限制了模型的有效容量。鼓励此洞察,我们提出了语义粒度对齐(SGA),以文本到图像合成为测试基准。SGA 在向量残差场中工程化针对性干预,以缓解梯度冲突。基于 DiT 和 U-Net 架构的评估表明,SGA 通过加速收敛和改进结构完整性,提升了效率-质量之间的权衡。

关键词

引用

@article{arxiv.2603.10785,
  title  = {The Quadratic Geometry of Flow Matching: Semantic Granularity Alignment for Text-to-Image Synthesis},
  author = {Zhinan Xiong and Shunqi Yuan},
  journal= {arXiv preprint arXiv:2603.10785},
  year   = {2026}
}

备注

43 pages