2 个月前

OpenViDial 2.0:具有视觉上下文的更大规模开放领域对话生成数据集

Shuhe Wang; Yuxian Meng; Xiaoya Li; Xiaofei Sun; Rongbin Ouyang; Jiwei Li
OpenViDial 2.0:具有视觉上下文的更大规模开放领域对话生成数据集
摘要

为了更好地模拟真实的人类对话过程,模型需要不仅基于先前的文本上下文生成对话,还需考虑视觉上下文。然而,随着多模态对话学习的发展,数据集规模逐渐成为瓶颈。在本报告中,我们发布了OpenViDial 2.0,这是一个比前一版本OpenViDial 1.0规模更大的开放领域多模态对话数据集。OpenViDial 2.0共包含从不同资源提取的560万条对话轮次,这些对话轮次均来自电影或电视剧,并且每条对话轮次都配对了相应的视觉上下文。我们希望这一大规模的数据集能够促进未来在开放领域多模态对话生成方面的研究,例如用于对话生成的多模态预训练。