一种简单且样本有效的多模态对话系统 S3
偏微分方程分析
2026-03-24 v3
摘要
本文提出了一个概念上简单却强大的多模态对话任务基线模型，即 S3 模型，达到了 MMMU 和 AI Journey Contest 2023 两个引人注目的排行榜近乎最好的成绩。该系统基于预训练的大型语言模型，预训练的图像和音频模态编码器，以及可训练的模态投影器。我们提出的有效数据混合训练此类体系结构，表明基于强大语言模型并在少量多模态数据上训练的多模态模型，可在多模态对话任务中高效地发挥作用。
引用
@article{arxiv.2406.18308,
title = {Global existence of large solutions to 3-D incompressible Navier-Stokes system},
author = {Shaolei Ru},
journal= {arXiv preprint arXiv:2406.18308},
year = {2026}
}
备注
Updated citation