Command Palette

Search for a command to run...

3日前

最初のフレームがビデオコンテンツカスタマイズの最適な場所である

Jingxi Chen Zongxia Li Zhichao Liu Guangyao Shi Xiyang Wu Fuxiao Liu Cornelia Fermuller Brandon Y. Feng Yiannis Aloimonos

最初のフレームがビデオコンテンツカスタマイズの最適な場所である

要約

動画生成モデルにおける最初のフレームの役割について、従来は動画の空間時間的な出発点として捉えられており、以降のアニメーション生成の「種」として機能するにとどまっていた。本研究では、これとは根本的に異なる視点を提示する。すなわち、動画モデルは最初のフレームを、生成過程の後半で再利用可能な視覚的エンティティを記憶する概念的メモリバッファとして間接的に扱っているという事実を明らかにした。この知見を活用することで、アーキテクチャの変更や大規模なファインチューニングを一切行わずに、わずか20~50個のトレーニング例を用いることで、多様なシナリオにおいて堅牢かつ汎化性の高い動画コンテンツのカスタマイズを実現可能であることを示した。これは、参照に基づく動画カスタマイズにおいて、従来無視されがちな動画生成モデルの強力な潜在能力を明らかにするものである。

AI で AI を構築

アイデアからローンチまで — 無料の AI 共同コーディング、すぐに使える環境、最適価格の GPU で AI 開発を加速。

AI 共同コーディング
すぐに使える GPU
最適価格
今すぐ始める

Hyper Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています
最初のフレームがビデオコンテンツカスタマイズの最適な場所である | 論文 | HyperAI超神経