各位研究多模态问答和对话的小伙伴们,是不是苦于找不到多模态对话数据集。别担心,我这里贴出最全的多模态数据集,大家可以去网上下载哦。
例如上图是DSTC7中的一个样本,包括视频和文本模态,用于MQA。
此外,simmic数据集在多模态多轮对话场景中应用也较多。