
摘要
近期,一种完全监督的说话人分离方法(UIS-RNN)被提出,该方法通过多个共享参数的循环神经网络来建模说话人。本文对这一模型进行了若干定性改进,显著提升了学习效率与整体分离性能。具体而言,我们提出了一种新的损失函数,称为“样本均值损失”(Sample Mean Loss),并引入了一种更优的说话人发言段行为建模方法,通过构建解析表达式来计算新说话人加入对话的概率。此外,我们证明了所提出的模型可基于固定长度的语音片段进行训练,从而在推理阶段无需依赖说话人切换信息。在DIHARD II挑战赛所使用的多领域数据集上,以x-vectors作为输入特征,实验结果表明,我们的在线方法相较于原始的UIS-RNN有明显提升,并达到了与使用PLDA打分的离线聚合聚类基线相当的性能水平。