HyperAIHyperAI

Command Palette

Search for a command to run...

Bewegung als Option mit Auswahlausgabe für die unüberwachte Videoobjektsegmentierung behandeln

Suhwan Cho Minhyeok Lee Jungho Lee MyeongAh Cho Seungwook Park Jaeyeob Kim Hyunsung Jang Sangyoun Lee

Zusammenfassung

Die unüberwachte Video-Objekt-Segmentierung (Unsupervised Video Object Segmentation) strebt danach, das auffälligste Objekt in einem Video ohne externe Anleitung bezüglich des Objekts zu erkennen. Auffällige Objekte zeigen oft charakteristische Bewegungen im Vergleich zum Hintergrund, und aktuelle Methoden nutzen dies, indem sie Bewegungshinweise aus optischen Flusskarten mit Erscheinungshinweisen aus RGB-Bildern kombinieren. Allerdings können optische Flusskarten häufig eng mit Segmentierungs-Masken korreliert sein, wodurch Netzwerke während des Trainings übermäßig auf Bewegungshinweise angewiesen werden. Dies führt zu Verletzbarkeit bei verwirrenden Bewegungshinweisen und resultiert in instabilen Vorhersagen. Um dieser Herausforderung zu begegnen, schlagen wir ein neues Netzwerk vor, das Bewegungshinweise als optionales Element und nicht als Notwendigkeit behandelt (motion-as-option network). Während des Trainings geben wir zufällig RGB-Bilder in den Bewegungsencoder ein anstelle von optischen Flusskarten, was die Abhängigkeit des Netzwerks von Bewegungshinweisen implizit verringert. Diese Gestaltung sichert zu, dass der Bewegungsencoder sowohl RGB-Bilder als auch optische Flusskarten verarbeiten kann, was je nach Art der Eingabe zu zwei unterschiedlichen Vorhersagen führt. Um diese Flexibilität optimal zu nutzen, führen wir einen adaptiven Ausgabeauswahlalgorithmus ein, der während des Testens die optimale Vorhersage bestimmt.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Bewegung als Option mit Auswahlausgabe für die unüberwachte Videoobjektsegmentierung behandeln | Paper | HyperAI