TalkPlayData 2：用于多模态对话式音乐推荐的代理化合成数据管道
信息检索
2025-10-10 v4 人工智能
多媒体
声音
音频与语音处理
摘要
我们介绍了TalkPlayData 2，这是一个由代理化数据管道生成的用于多模态对话式音乐推荐的合成数据集。在提出的管道中，创建了多个大语言模型（LLM）代理，每个代理都有特定的角色提示和对不同信息部分的访问权限，通过记录Listener LLM与Recsys LLM之间的对话来获取聊天数据。为涵盖各种对话场景，针对每个对话，Listener LLM都基于微调的对话目标进行条件化。最终，所有LLM都具备音频和图像的多模态能力，允许模拟多模态推荐和对话。在LLM评判和主观评估实验中，TalkPlayData 2在与训练生成式推荐模型有关的各种方面上实现了预期目标。TalkPlayData 2及其生成代码已发布于https://talkpl.ai/talkplaydata2。
引用
@article{arxiv.2509.09685,
title = {TalkPlayData 2: An Agentic Synthetic Data Pipeline for Multimodal Conversational Music Recommendation},
author = {Keunwoo Choi and Seungheon Doh and Juhan Nam},
journal= {arXiv preprint arXiv:2509.09685},
year = {2025}
}
备注
2025-10-08: updating the stat table with the latest numbers. updated the abstract per the latest license terms