CamCloneMaster: Referenzbasierte Kamerasteuerung für die Videogenerierung ermöglichen
Yawen Luo Jianhong Bai Xiaoyu Shi Menghan Xia Xintao Wang Pengfei Wan Di Zhang Kun Gai Tianfan Xue

Abstract
Die Steuerung der Kamera ist entscheidend für die Erzeugung ausdrucksstarker und filmischer Videos. Bisherige Methoden stützen sich auf explizite Sequenzen von Kameraparametern als Steuerbedingungen, was für Benutzer, insbesondere bei komplexen Kamerabewegungen, aufwändig und unpraktisch sein kann. Um eine intuitivere Methode zur Kamerasteuerung bereitzustellen, präsentieren wir CamCloneMaster, einen Rahmen, der es Benutzern ermöglicht, Kamerabewegungen aus Referenzvideos zu replizieren, ohne Kameraparameter oder eine Feinabstimmung im Testzeitraum zu benötigen. CamCloneMaster unterstützt nahtlos referenzbasierte Kamerasteuerung sowohl für Image-to-Video- als auch für Video-to-Video-Aufgaben innerhalb eines einheitlichen Rahmens. Zudem stellen wir den Camera Clone Dataset vor, ein großskaliges, synthetisches Datenset, das speziell für das Lernen von Kamerareplikation konzipiert ist und eine Vielzahl an Szenen, Objekten und Kamerabewegungen umfasst. Ausführliche Experimente und Benutzerstudien belegen, dass CamCloneMaster bestehende Methoden hinsichtlich Kamerakontrollierbarkeit und visueller Qualität übertrifft.
KI mit KI entwickeln
Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.