HyperAIHyperAI

Command Palette

Search for a command to run...

APANet: Adaptive Prototypes Alignment Network für Few-Shot Semantic Segmentation

Jiacheng Chen Bin-Bin Gao Zongqing Lu Jing-Hao Xue Chengjie Wang Qingmin Liao

Zusammenfassung

Few-shot-semantische Segmentierung zielt darauf ab, Objekte neuer Klassen in einer gegebenen Abfragungsbild mit nur wenigen beschrifteten Unterstützungsbildern zu segmentieren. Die meisten modernen Ansätze nutzen einen Metrik-Lernrahmen, der die Segmentierung durch die Zuordnung jedes Abfragungsfeatures zu einem gelernten, klassenspezifischen Prototyp durchführt. Dieser Rahmen leidet jedoch unter verzerrter Klassifikation aufgrund unvollständiger Merkmalsvergleiche. Um dieses Problem zu beheben, stellen wir eine adaptive Prototypendarstellung vor, indem wir klassenspezifische und klassenunabhängige Prototypen einführen und somit vollständige Merkmalspaare für die Lernung semantischer Ausrichtung mit Abfragungsfeatures konstruieren. Die komplementäre Art des Merkmalslernens bereichert effektiv den Merkmalsvergleich und unterstützt die Entwicklung eines unverzerrten Segmentierungsmodells im Few-shot-Szenario. Die Methode wird mit einem zweigleitigen, end-to-end-Netzwerk realisiert (d.h. einem klassenspezifischen Zweig und einem klassenunabhängigen Zweig), das Prototypen generiert und anschließend Abfragungsfeatures kombiniert, um Vergleiche durchzuführen. Darüber hinaus ist der vorgeschlagene klassenunabhängige Zweig einfach, aber äußerst wirksam. In der Praxis kann er adaptiv mehrere klassenunabhängige Prototypen für Abfragungsbilder generieren und die Merkmalsausrichtung auf selbstkontrastive Weise lernen. Umfassende Experimente auf PASCAL-5i^ii und COCO-20i^ii belegen die Überlegenheit unserer Methode. Ohne die Inferenzeffizienz zu beeinträchtigen, erzielt unser Modell sowohl im 1-Shot- als auch im 5-Shot-Szenario state-of-the-art-Ergebnisse für die semantische Segmentierung.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp