HyperAIHyperAI

Command Palette

Search for a command to run...

Zusammenfassung und Suche: Lernen von konsensbewusster dynamischer Faltung für Co-Salienzerkennung

Ni Zhang Junwei Han Nian Liu Ling Shao

Zusammenfassung

Menschen führen die Co-Salienzerkennung durch, indem sie zunächst das konsensuelle Wissen in der gesamten Gruppe zusammenfassen und dann entsprechende Objekte in jedem Bild suchen. Vorherige Methoden fehlen oft an Robustheit, Skalierbarkeit oder Stabilität bei dem ersten Prozess und fügen einfach konsensuelle Merkmale mit Bildmerkmalen für den zweiten Prozess zusammen. In diesem Artikel schlagen wir ein neues konsensbewusstes dynamisches Faltungsmodell vor, um den „Zusammenfassungs- und Suchprozess“ explizit und effektiv durchzuführen. Um konsensuelle Bildmerkmale zusammenzufassen, verwenden wir zunächst eine effektive Pooling-Methode, um robuste Merkmale für jedes einzelne Bild zu extrahieren, und aggregieren dann überbildliche Konsenshinweise mittels des Selbst-Aufmerksamkeitsmechanismus (self-attention mechanism). Auf diese Weise erfüllt unser Modell die Anforderungen an Skalierbarkeit und Stabilität. Als Nächstes generieren wir dynamische Kerne aus den Konsensmerkmalen, um das zusammengefasste konsensuelle Wissen zu kodieren. Zwei Arten von Kernen werden ergänzend generiert, um sowohl detaillierte bildspezifische Konsensobjekthinweise als auch grobe gruppenweises gemeinsames Wissen zusammenzufassen. Dann können wir die Objektsuche effektiv auf mehreren Skalen durchführen, indem wir die dynamische Faltung einsetzen. Darüber hinaus schlagen wir eine neuartige und effektive Datenverarbeitungsmethode vor, um unser Netzwerk zu trainieren. Experimentelle Ergebnisse auf vier Benchmark-Datensätzen bestätigen die Effektivität unserer vorgeschlagenen Methode. Unser Code und Salienzkarten sind unter \url{https://github.com/nnizhang/CADC} verfügbar.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp