HyperAIHyperAI

Command Palette

Search for a command to run...

メモリ強化型非局所注意機構を用いたビデオ超解像

Jiyang Yu Jingen Liu Liefeng Bo Tao Mei

概要

本論文では、低解像度(LR)動画から高忠実度の高解像度(HR)動画を生成する新しいビデオ超解像手法を提案します。従来の手法は、主に時間的な近傍フレームを活用して現在のフレームの超解像を支援していましたが、空間的なフレームアライメントの難しさや類似したLR近傍フレームからの有用な情報不足により、性能向上が限られていました。これに対し、我々はフレームアライメントなしでビデオ超解像を行うクロスフレーム非局所注意機構を開発しました。これにより、動画内の大きな動きに対してより堅牢な処理が可能となります。さらに、近傍フレームを超えた情報を取得するために、一般的な動画詳細を超解像学習中に記憶する新たなメモリ拡張型注意モジュールを設計しました。実験結果は、フレームアライメントを行わない場合でも最新手法と比較して大規模な動きのある動画で優れた性能を達成できることを示しています。当方のソースコードは公開される予定です。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています