HyperAIHyperAI

Command Palette

Search for a command to run...

グローバルコンテキストモジュールを用いた高速なビデオオブジェクトセグメンテーション

Yu Li Zhuoran Shen Ying Shan

概要

我々は、リアルタイムかつ高精度な半教師付き動画オブジェクトセグメンテーションアルゴリズムを開発した。このアルゴリズムの精度は、最も正確ではあるが計算コストが非常に高いオンライン学習モデルと同等であり、同時に、精度はやや劣るものの最も高速なテンプレートマッチング手法と同程度の処理速度を達成している。モデルの核心となる構成要素は、動画全体にわたって情報を効果的に要約・伝達する新しいグローバルコンテキストモジュールである。従来の手法が現在のフレームのセグメンテーションを導くために1フレームまたは数フレームのみを用いるのに対し、本モジュールは過去のすべてのフレームを活用する。また、従来の最先端技術である空間時間メモリネットワークがスパティオテイムポジションごとにメモリをキャッシュするのに対し、グローバルコンテキストモジュールは固定サイズの特徴表現を用いる。このため、動画の長さにかかわらずメモリ使用量が一定となり、メモリと計算量の消費を大幅に削減できる。この新規モジュールを導入したことで、本モデルは標準ベンチマークにおいてリアルタイム速度でトップレベルの性能を達成した。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています
グローバルコンテキストモジュールを用いた高速なビデオオブジェクトセグメンテーション | 記事 | HyperAI超神経