HyperAIHyperAI

Command Palette

Search for a command to run...

SelFlow: Selbstüberwachtes Lernen des optischen Flusses

Pengpeng Liu; Michael Lyu; Irwin King; Jia Xu

Zusammenfassung

Wir präsentieren einen selbstüberwachten Lernansatz für optische Flussbestimmung. Unsere Methode extrahiert zuverlässige Flussabschätzungen aus nicht verdeckten Pixeln und verwendet diese Vorhersagen als Grundwahrheit, um den optischen Fluss für halluzinierte Verdeckungen zu lernen. Des Weiteren entwickeln wir ein einfaches CNN (Convolutional Neural Network), um zeitliche Informationen aus mehreren Bildern zur Verbesserung der Flussabschätzung zu nutzen. Diese beiden Prinzipien führen zu einem Ansatz, der die beste Leistung bei der selbstüberwachten optischen Flussbestimmung auf anspruchsvollen Benchmarks wie MPI Sintel, KITTI 2012 und 2015 erzielt. Besonders erwähnenswert ist, dass unser selbstüberwachtes vortrainiertes Modell eine ausgezeichnete Initialisierung für überwachtes Feinabstimmung bietet. Unsere feinabgestimmten Modelle erreichen Spitzenleistungen auf allen drei Datensätzen. Zum Zeitpunkt des Schreibens erreichen wir einen EPE (End Point Error) von 4,26 auf dem Sintel-Benchmark, was alle eingereichten Methoden übertrifft.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp