HyperAIHyperAI

Command Palette

Search for a command to run...

Camera Clone Multi-view Dataset

Date

vor 2 Monaten

Organization

Die Universität von Hongkong
Kuaishou-Technologie
Zhejiang-Universität

Paper URL

2506.03140

License

Apache 2.0

Camera Clone, das 2025 von der Universität Hongkong in Zusammenarbeit mit der Zhejiang-Universität, Kuaishou Technology und anderen Institutionen veröffentlicht wurde, ist ein umfangreicher synthetischer Videodatensatz, der mit der Unreal Engine 5 gerendert wurde. Die zugehörige Forschungsarbeit trägt den Titel „...“.CamCloneMaster: Referenzbasierte Kamerasteuerung für die VideogenerierungZiel ist es, das Lernen von Kameraklonen zu unterstützen, das die Kamerabewegung eines Referenzvideos nachbildet, während der Szeneninhalt unverändert bleibt, und so eine "Inhaltswiedergabe + Anpassung der Kamerabewegung" zu erreichen.

Dieser Datensatz umfasst 391.000 Videos von 39.100 dynamischen Aufnahmeorten, die jeweils von 10 Kameras gleichzeitig aufgenommen wurden. Basierend auf diesen Perspektivenkombinationen besteht der Datensatz aus 1.154.819 Triple-Sets, die jeweils aus einem Referenzvideo der Kamerabewegung, einem Inhaltsreferenzvideo und einem Zielvideo mit derselben Kamerabewegung bestehen.

Übersicht der Datensatzmerkmale:

  • Generierungsumgebung: Alle Videos wurden in 40 hochwertigen 3D-Szenen generiert.
  • Charaktere und Aktionen: Enthält 66 Charaktere und 93 Aktionen von Fab und Mixamo.
  • Kameratrajektorie: Es werden mehrere Arten von automatisch generierten Kameratrajektorien verwendet, wobei dieselbe Trajektorie an verschiedenen Positionen wiederverwendet wird, um Paare von Trajektorien zu konstruieren.
  • Kameraaufbau: An jedem Aufnahmeort werden 10 synchronisierte Kameras eingesetzt, um Daten aus verschiedenen Perspektiven zu erfassen.
  • Videospezifikationen: Die Länge beträgt einheitlich 77 Bilder pro Sekunde und 15 FPS; die Auflösung beträgt 1344×768 oder 1008×576, und durch Zentrierung können verschiedene generative Modelle angepasst werden.
  • Dateiorganisation: Die Daten sind nach Datum und Titelnummer organisiert, wobei jeder Titelordner alle Viewpoint-Videos enthält, die diesem Titel zugeordnet sind.

Build AI with AI

From idea to launch — accelerate your AI development with free AI co-coding, out-of-the-box environment and best price of GPUs.

AI Co-coding
Ready-to-use GPUs
Best Pricing

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp