基于多模态扩散模型的光子模式预测
光学
2024-02-26 v3 计算物理
摘要
光子模式的概念是光学和光子学的基石，它可以描述光的传播。麦克斯韦方程组在根据结构信息计算模式场中发挥作用，但这一过程需要大量计算，尤其是在处理三维模型时。为了克服这一障碍，我们引入了多模态扩散模型来预测特定结构中的光子模式。使用对比语言-图像预训练（CLIP）模型来建立光子结构与相应模式之间的联系。然后我们以稳定扩散（Stable Diffusion）模型为例，实现从结构信息生成光场的功能。我们的工作引入多模态深度学习来构建结构信息与光场之间的复杂映射作为高维向量，并基于该映射生成光场图像。
引用
@article{arxiv.2401.08199,
title = {Photonic Modes Prediction via Multi-Modal Diffusion Model},
author = {Jinyang Sun and Xi Chen and Xiumei Wang and Dandan Zhu and Xingping Zhou},
journal= {arXiv preprint arXiv:2401.08199},
year = {2024}
}