HyperAIHyperAI

Command Palette

Search for a command to run...

DeFMO: Entzerrung und Formwiederherstellung schneller bewegter Objekte

Denys Rozumnyi Martin R. Oswald Vittorio Ferrari Jiri Matas Marc Pollefeys

Zusammenfassung

Gegenstände, die mit hoher Geschwindigkeit bewegt werden, erscheinen bei der Aufnahme mit Kameras erheblich verschwommen. Dieser verschwommene Eindruck ist besonders bei Objekten mit komplexer Form oder Textur ambivalent. In solchen Fällen sind klassische Verfahren sowie Menschen oft nicht in der Lage, das Erscheinungsbild und die Bewegung des Objekts wiederherzustellen. Wir schlagen eine Methode vor, die auf Basis eines einzigen Bildes mit geschätztem Hintergrund das Erscheinungsbild und die Position des Objekts in einer Reihe von Unterrahmen ausgibt, als sei es mit einer Hochgeschwindigkeitskamera aufgenommen worden (d. h. temporäre Superauflösung). Das vorgeschlagene generative Modell projiziert das verschwommene Objektbild in eine latente Raumdarstellung, trennt den Hintergrund entkoppelt und rendernt das scharfe Erscheinungsbild. Inspiriert durch das Bildentstehungsmodell entwickeln wir neuartige selbstüberwachte Verlustfunktionsterme, die die Leistungsfähigkeit steigern und eine gute Verallgemeinerungsfähigkeit zeigen. Die vorgestellte Methode DeFMO wird auf einem komplexen synthetischen Datensatz trainiert, zeigt jedoch auch hervorragende Ergebnisse auf realen Datensätzen aus mehreren Quellen. DeFMO übertrifft den Stand der Technik und generiert hochwertige Frames mit temporärer Superauflösung.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp