SynCamVideo-Dataset 多相机同步视频数据集

SynCamVideo-Dataset 是一个由浙江大学、快手科技、清华大学和香港中文大学的研究团队于 2024 年使用虚幻引擎 5 (Unreal Engine 5) 渲染生成的多相机同步视频数据集，相关论文成果为「SynCamMaster: Synchronizing Multi-Camera Video Generation from Diverse Viewpoints」。

包含 1k 个不同的场景，每个场景由 36 个相机捕捉，总共生成 36k 个视频。数据集以 50 种不同的动物作为「主要对象」，并利用来自 Poly Haven 的 20 个不同地点作为背景。每个场景中的相机放置在半球形表面上，距离场景中心的距离为 3.5 米至 9 米。为了确保渲染的视频与现实世界视频的领域偏移最小，相机的仰角限制在 0° 至 45° 之间，方位角限制在 0° 至 360° 之间。每个相机在这些约束条件下随机采样，而不是在所有场景中使用相同的相机位置集。

SynCamVideo 数据集可用于训练多相机同步视频生成模型，激发电影制作和多视图数据生成等领域的应用。数据集的文件结构包含训练和验证集，每个场景的视频和对应的相机外部参数分别存储。