Symmetrische Parallaxenaufmerksamkeit für die Super-Auflösung von Stereo-Bildern

Obwohl die letzten Jahre große Fortschritte bei der Super-Resolution (SR) von Stereo-Bildern gezeigt haben, wurde die nützliche Information, die durch binokulare Systeme bereitgestellt wird, noch nicht vollständig genutzt. Da Stereo-Bilder unter der Epipolarenbeschränkung hoch symmetrisch sind, verbessern wir in dieser Arbeit die Leistungsfähigkeit der Stereo-Bild-Super-Resolution durch die Nutzung von Symmetriehinweisen in Stereo-Bildpaaren. Insbesondere schlagen wir ein symmetrisches bidirektionales Parallaxenaufmerksamkeitsmodul (biPAM) und ein Inline-Verdeckungsbehandlungsverfahren vor, um die Kreuzsichtinformationen effektiv zu verknüpfen. Anschließend entwerfen wir ein Siameses Netzwerk mit einem biPAM, um beide Sichtweisen in einer hoch symmetrischen Weise zu super-resolen. Schließlich entwickeln wir mehrere Beleuchtungsrobuste Verlustfunktionen, um die Stereo-Konsistenz zu erhöhen. Experimente auf vier öffentlichen Datensätzen zeigen die überlegene Leistungsfähigkeit unserer Methode. Der Quellcode ist unter https://github.com/YingqianWang/iPASSR verfügbar.