HyperAIHyperAI

Command Palette

Search for a command to run...

Vorschlag, Verfolgung und Segmentierung (VVS): Ein kaskadieretes Netzwerk für die Video-Objekt-Segmentierung

Zhou Qiang ; Huang Zilong ; Huang Lichao ; Gong Yongchao ; Shen Han ; Huang Chang ; Liu Wenyu ; Wang Xinggang

Zusammenfassung

Die Video-Objekt-Segmentierung (VOS) zielt darauf ab, die Objekte auf Pixel-Ebene zu verfolgen, wobei nur die Annotationen im ersten Frame zur Verfügung stehen. Trotz des starken Fortschritts im Bereich des Deep Learning bleibt dies eine schwierige Aufgabe aufgrund der großen visuellen Variationen von Objekten in Videos und dem Mangel an Trainingsbeispielen. Um das VOS-Problem zu lösen, führen wir durch den vorgeschlagenen einheitlichen Framework mehrere neue Erkenntnisse ein, das aus Komponenten für Objektvorschläge, -verfolgung und -segmentierung besteht. Das Objektvorschlagsnetzwerk überträgt Objektinformation als generisches Wissen in die VOS; das Verfolgungsnetzwerk identifiziert das Zielobjekt aus den Vorschlägen; und das Segmentierungsnetzwerk wird basierend auf den Verfolgungsergebnissen mit einem neuartigen dynamischen Referenz-basierten Modellanpassungsverfahren durchgeführt. Ausführliche Experimente wurden auf dem DAVIS'17-Datensatz und dem YouTube-VOS-Datensatz durchgeführt. Unsere Methode erzielt den Stand der Technik in mehreren Benchmarks für Video-Objekt-Segmentierung. Wir stellen den Code öffentlich zur Verfügung unter https://github.com/sydney0zq/PTSNet.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp