
摘要
预测视频序列的未来帧是一项具有挑战性的生成建模任务。有前景的方法包括概率潜在变量模型,如变分自编码器(Variational Auto-Encoder)。尽管变分自编码器能够处理不确定性并建模多种可能的未来结果,但它们倾向于产生模糊的预测。在本研究中,我们认为这是欠拟合的一个迹象。为了解决这一问题,我们提出增加潜在分布的表达能力,并使用更高容量的似然模型。我们的方法依赖于潜在变量的层次结构,该结构定义了一组灵活的先验和后验分布,以更好地建模未来序列的概率。我们通过一系列消融实验验证了我们的提议,并将我们的方法与当前最先进的潜在变量模型进行了比较。在三个不同的数据集中,我们的方法在多个指标下表现优异。