Camera Clone Multi-view Dataset
Datum
Paper-URL
Lizenz
Apache 2.0
Camera Clone, das 2025 von der Universität Hongkong in Zusammenarbeit mit der Zhejiang-Universität, Kuaishou Technology und anderen Institutionen veröffentlicht wurde, ist ein umfangreicher synthetischer Videodatensatz, der mit der Unreal Engine 5 gerendert wurde. Die zugehörige Forschungsarbeit trägt den Titel „...“.CamCloneMaster: Referenzbasierte Kamerasteuerung für die VideogenerierungZiel ist es, das Lernen von Kameraklonen zu unterstützen, das die Kamerabewegung eines Referenzvideos nachbildet, während der Szeneninhalt unverändert bleibt, und so eine "Inhaltswiedergabe + Anpassung der Kamerabewegung" zu erreichen.
Dieser Datensatz umfasst 391.000 Videos von 39.100 dynamischen Aufnahmeorten, die jeweils von 10 Kameras gleichzeitig aufgenommen wurden. Basierend auf diesen Perspektivenkombinationen besteht der Datensatz aus 1.154.819 Triple-Sets, die jeweils aus einem Referenzvideo der Kamerabewegung, einem Inhaltsreferenzvideo und einem Zielvideo mit derselben Kamerabewegung bestehen.
Übersicht der Datensatzmerkmale:
- Generierungsumgebung: Alle Videos wurden in 40 hochwertigen 3D-Szenen generiert.
- Charaktere und Aktionen: Enthält 66 Charaktere und 93 Aktionen von Fab und Mixamo.
- Kameratrajektorie: Es werden mehrere Arten von automatisch generierten Kameratrajektorien verwendet, wobei dieselbe Trajektorie an verschiedenen Positionen wiederverwendet wird, um Paare von Trajektorien zu konstruieren.
- Kameraaufbau: An jedem Aufnahmeort werden 10 synchronisierte Kameras eingesetzt, um Daten aus verschiedenen Perspektiven zu erfassen.
- Videospezifikationen: Die Länge beträgt einheitlich 77 Bilder pro Sekunde und 15 FPS; die Auflösung beträgt 1344×768 oder 1008×576, und durch Zentrierung können verschiedene generative Modelle angepasst werden.
- Dateiorganisation: Die Daten sind nach Datum und Titelnummer organisiert, wobei jeder Titelordner alle Viewpoint-Videos enthält, die diesem Titel zugeordnet sind.
KI mit KI entwickeln
Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.