DELTA：用于多模态心理咨询的强化学习 deliberative 多智能体推理
计算与语言
2026-02-05 v1
摘要
心理咨询是一种本质上具有多模态认知过程的活动，其中医生们整合口头内容与视觉和声音线索，以推断来访者的心理状态并提供共情回应。然而，大多数现有的基于语言模型的咨询系统仅 operate on text 且依赖隐式的心理状态推断。我们引入 DELTA，一个 deliberative 多智能体框架，将咨询建模为跨多模态信号的结构化推理过程，区分证据 grounding、心理状态抽象和响应生成。DELTA 进一步融入了由分布级情感共鸣得分引导的强化学习，以鼓励情感共鸣的回应。在多模态咨询基准测试上进行的实验表明，DELTA 在模型性能和情感共鸣方面均取得显著提升。消融和定性分析表明，显式的多模态推理和结构化的心理状态表示在支持人类-人工共情交互方面发挥着互补的作用。
引用
@article{arxiv.2602.04112,
title = {DELTA: Deliberative Multi-Agent Reasoning with Reinforcement Learning for Multimodal Psychological Counseling},
author = {Jiangnan Yang and Junjie Chen and Fei Wang and Yiqi Nie and Yuxin Liu and Zhangling Duan and Jie Chen},
journal= {arXiv preprint arXiv:2602.04112},
year = {2026}
}