Co-Saliency Detection mittels maskengesicherter vollständig konvolutioneller Netzwerke mit mehrskaliger Label-Smoothing
{ Qingshan Liu Bo Liu Tengpeng Li Kaihua Zhang}

Abstract
Bei dem Problem der Bild-Co-Saliency-Detektion stellt sich eine zentrale Herausforderung dar in der Modellierung des gemeinsamen Musters der co-salienten Teile, das sowohl innerhalb jedes einzelnen Bildes als auch über alle relevanten Bilder hinweg auftritt. In diesem Artikel stellen wir einen hierarchischen Ansatz für die Bild-Co-Saliency-Detektion vor, der als grob-zu-fein-Strategie konzipiert ist, um dieses Muster effektiv zu erfassen. Zunächst schlagen wir eine maskenorientierte vollständig konvolutionale Netzwerkarchitektur vor, um die initialen Ergebnisse der Co-Saliency-Detektion zu generieren. Die Maske dient der Hintergrundentfernung und wird aus den hochlevel-Feature-Response-Karten des vortrainierten VGG-Netzwerks abgeleitet. Anschließend entwickeln wir ein multiscales Label-Smoothing-Modell, um die Detektionsergebnisse weiter zu verfeinern. Das vorgeschlagene Modell optimiert gemeinsam die Glättung der Labels sowohl für Pixel als auch für Superpixel. Experimentelle Ergebnisse auf drei etablierten Benchmark-Datensätzen für die Bild-Co-Saliency-Detektion – iCoseg, MSRC und Cosal2015 – belegen eine herausragende Leistung im Vergleich zu aktuellen state-of-the-art-Methoden.
Benchmarks
| Benchmark | Methodik | Metriken |
|---|---|---|
| co-salient-object-detection-on-coca | CSMG | Mean F-measure: 0.390 S-measure: 0.627 max F-measure: 0.499 mean E-measure: 0.606 |
| co-salient-object-detection-on-cosal2015 | CSMG | MAE: 0.130 S-measure: 0.774 max E-measure: 0.842 max F-measure: 0.784 |
| co-salient-object-detection-on-cosod3k | CSMG | MAE: 0.157 S-measure: 0.711 max E-measure: 0.804 max F-measure: 0.709 |
KI mit KI entwickeln
Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.