HyperAIHyperAI

Command Palette

Search for a command to run...

DVIS-DAQ: Verbesserung der Video-Segmentierung durch dynamische Ankerabfragen

Yikang Zhou extsuperscript1 extsuperscript* Tao Zhang extsuperscript1,2 extsuperscript* Shunping Ji extsuperscript1 Shuicheng Yan extsuperscript2 Xiangtai Li extsuperscript2 extsuperscript†

Zusammenfassung

Moderne Video-Segmentierungsmethoden verwenden Objektanfragen, um die Zuordnung zwischen Frames durchzuführen, und zeigen zufriedenstellende Leistungen bei der Verfolgung von kontinuierlich auftretenden Objekten trotz großer Bewegungen und vorübergehender Verdeckungen. Allerdings unterperformen sie bei neu auftauchenden und verschwindenden Objekten, die in der Realität häufig vorkommen, da sie versuchen, das Auftreten und Verschwinden von Objekten durch Merkmalsübergänge zwischen Hintergrund- und Vordergrundanfragen zu modellieren, die erhebliche Merkmalslücken aufweisen. Wir führen dynamische Ankeranfragen (Dynamic Anchor Queries, DAQ) ein, um den Übergang zwischen den Anker- und Zielanfragen zu verkürzen, indem wir Ankeranfragen dynamisch basierend auf den Merkmalen potentieller Kandidaten generieren. Des Weiteren stellen wir eine Strategie zur Simulation des Auftretens und Verschwindens von Objekten auf Anfrageebene (Emergence and Disappearance Simulation, EDS) vor, die das Potenzial von DAQ ohne zusätzlichen Aufwand ausschöpft. Schließlich kombinieren wir unsere vorgeschlagenen DAQ und EDS mit DVIS, um DVIS-DAQ zu erhalten. Ausführliche Experimente zeigen, dass DVIS-DAQ eine neue Standarte (state-of-the-art) in fünf Hauptvideo-Segmentierungsbenchmarks erreicht. Der Quellcode und die Modelle sind unter \url{https://github.com/SkyworkAI/DAQ-VS} verfügbar.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
DVIS-DAQ: Verbesserung der Video-Segmentierung durch dynamische Ankerabfragen | Paper | HyperAI