HyperAIHyperAI

Command Palette

Search for a command to run...

MobileVOS: 実時間ビデオオブジェクトセグメンテーション コントラスト学習と知識蒸留の融合

Roy Miles; Mehmet Kerim Yucel; Bruno Manganelli; Albert Saa-Garriga

概要

本論文では、モバイル電話などのリソース制約のあるデバイスにおける半教師付きビデオオブジェクトセグメンテーションの問題に取り組んでいます。この問題をディスティレーションタスクとして定式化し、有限のメモリを持つ小さな時空間ネットワークが、計算コストを大幅に削減しながら(Samsung Galaxy S22では1フレームあたり32ミリ秒)、最先端の手法と競合する結果を得られることを示しています。具体的には、知識ディスティレーションと教師付きコントラスティブ表現学習を統一する理論的に裏付けられた枠組みを提供します。これらのモデルは、画素レベルでのコントラスティブ学習と事前学習済み教師からのディスティレーションの両方から共同で恩恵を受けられるようになっています。我々は、DAVISおよびYouTubeの標準ベンチマークにおいて、最大5倍速く、32倍少ないパラメータで、最先端の手法と競合するJ&Fスコアを達成することにより、この損失関数の有効性を検証しました。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています
MobileVOS: 実時間ビデオオブジェクトセグメンテーション コントラスト学習と知識蒸留の融合 | 記事 | HyperAI超神経