HyperAIHyperAI
vor 2 Monaten

Ständige Okklusionen und Schätzung des optischen Flusses

Michal Neoral; Jan Šochman; Jiří Matas
Ständige Okklusionen und Schätzung des optischen Flusses
Abstract

Zwei Probleme der optischen Flussabschätzung werden behandelt: i) die Schätzung und Behandlung von Verdeckungen und ii) die Schätzung aus Bildfolgen, die länger als zwei Frames sind. Die vorgeschlagene Methode ContinualFlow schätzt Verdeckungen vor dem Fluss, um den durch Verdeckungen beeinflussten Fluss für deren Schätzung zu vermeiden. Es wird gezeigt, dass die Bereitstellung von Verdeckungsmasken als zusätzliche Eingabe für die Flussabschätzung das Standardleistungsmaß um mehr als 25 % auf KITTI und Sintel verbessert. Als zweite Beitragsleistung wird eine neuartige Methode zur Einbeziehung von Informationen aus vergangenen Frames in die Flussabschätzung eingeführt. Der Fluss des vorherigen Frames dient sowohl als Eingabe für die Verdeckungsschätzung als auch als Vorwissen in verdeckten Regionen, also in Gebieten ohne visuelle Korrespondenzen. Durch die kontinuierliche Nutzung des Flusses des vorherigen Frames verbessert sich die Leistung von ContinualFlow weiter um 18 % auf KITTI und 7 % auf Sintel, wodurch Spitzenleistungen auf KITTI und Sintel erzielt werden.