HyperAIHyperAI

Command Palette

Search for a command to run...

SWEM: Richtung Echtzeit-Videosegmentierung mit sequentieller gewichteter Erwartung-Maximierung

Zhihui Lin Tianyu Yang Maomao Li Ziyu Wang Chun Yuan Wenhao Jiang Wei Liu

Zusammenfassung

Methode basierend auf der Zuordnung, insbesondere solche, die auf räumlich-zeitlichem Gedächtnis fußen, sind bei der semi-überwachten Videoobjektsegmentierung (VOS) erheblich vorteilhafter als andere Lösungen. Allerdings führen kontinuierlich wachsende und redundante Vorlagenmerkmale zu einer ineffizienten Inferenz. Um dies zu verbessern, schlagen wir ein neues sequentielles gewichtetes Erwartung-Maximierung-Netzwerk (Sequential Weighted Expectation-Maximization, SWEM) vor, das die Redundanz von Gedächtnismerkmalen erheblich reduziert. Im Gegensatz zu früheren Methoden, die nur die Redundanz von Merkmalen zwischen Frames erkennen, kombiniert SWEM sowohl innerhalb von Frames als auch zwischen Frames ähnliche Merkmale durch den Einsatz eines sequentiellen gewichteten EM-Algorithmus. Darüber hinaus verleihen adaptive Gewichte für Frame-Merkmale dem SWEM die Flexibilität, schwierige Beispiele darzustellen und die Unterscheidbarkeit der Vorlagen zu verbessern. Des Weiteren behält die vorgeschlagene Methode eine feste Anzahl von Vorlagenmerkmalen im Gedächtnis, was die stabile Inferenzkomplexität des VOS-Systems gewährleistet. Ausführliche Experimente mit den gängigen DAVIS und YouTube-VOS-Datensätzen bestätigen die hohe Effizienz (36 FPS) und Leistung (84,3% J&F\mathcal{J}\&\mathcal{F}J&F auf dem Validierungsdatensatz DAVIS 2017) des SWEM. Der Quellcode ist unter folgendem Link verfügbar: https://github.com/lmm077/SWEM.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp