Command Palette

Search for a command to run...

7 天前

CamCloneMaster:实现基于参考的相机控制用于视频生成

Yawen Luo Jianhong Bai Xiaoyu Shi Menghan Xia Xintao Wang Pengfei Wan Di Zhang Kun Gai Tianfan Xue

CamCloneMaster:实现基于参考的相机控制用于视频生成

摘要

相机控制对于生成富有表现力和电影感的视频至关重要。现有的方法依赖于显式的相机参数序列作为控制条件,这在用户构建复杂相机运动时往往显得繁琐。为提供一种更直观的相机控制方式,我们提出了 CamCloneMaster,一种无需相机参数且无需在测试阶段微调即可实现从参考视频中复现相机运动的框架。CamCloneMaster 在统一的框架下,无缝支持图像到视频以及视频到视频任务中的基于参考的相机控制。此外,我们还构建了 Camera Clone 数据集,这是一个大规模的合成数据集,专为相机复现学习而设计,涵盖多样化的场景、主体和相机运动。大量实验与用户研究结果表明,CamCloneMaster 在相机可控性与视觉质量方面均优于现有方法。

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供