Camera Cloneは、香港大学が浙江大学、Kuaishou Technologyなどの機関と共同で2025年にリリースした、Unreal Engine 5を使用してレンダリングされた大規模な合成ビデオデータセットです。関連する研究論文のタイトルは「...」です。CamCloneMaster: ビデオ生成のためのリファレンスベースのカメラ制御の有効化目標は、シーンの内容を変えずに参照動画のカメラモーションを再現するカメラクローン学習をサポートし、「コンテンツ再現+カメラモーションマッチング」を実現することです。 このデータセットには、10台のカメラで同時に撮影された39,100箇所の動的な撮影場所をカバーする391,000本の動画が含まれています。これらの視点の組み合わせに基づいて、データセットは1,154,819個のトリプルセットで構成され、カメラモーション参照動画、コンテンツ参照動画、そして同じカメラ軌跡を再現するターゲット動画で構成されています。

データセット機能の概要:

• 生成環境: すべてのビデオは 40 の高品質 3D シーンで生成されました。
• キャラクターとアクション: Fab と Mixamo の 66 のキャラクターと 93 のアクションが含まれます。
• カメラ軌跡: 自動生成された複数種類のカメラ軌跡が使用され、同じ軌跡が異なる場所で再利用されて軌跡のペアが構築されます。
• カメラの設置: 撮影場所ごとに 10 台の同期カメラを配置し、マルチビュー データをキャプチャします。
• ビデオ仕様: 長さは均一に 77 フレーム/秒、15 FPS、解像度は 1344×768 または 1008×576 で、中央切り取りにより異なる生成モデルに適応できます。
• ファイル構成: データは日付とトラック番号別に整理され、各トラック フォルダーにはそのトラックに対応するすべての視点ビデオが含まれます。

引用

@inproceedings{luo2025camclonemaster,
title={Camclonemaster: Enabling reference-based camera control for video generation},
author={Luo, Yawen and Shi, Xiaoyu and Bai, Jianhong and Xia, Menghan and Xue, Tianfan and Wang, Xintao and Wan, Pengfei and Zhang, Di and Gai, Kun},
booktitle={Proceedings of the SIGGRAPH Asia 2025 Conference Papers},
pages={1--10},
year={2025}
}