HyperAIHyperAI

Command Palette

Search for a command to run...

BasicVSR++: Verbesserung der Videosuperauflösung durch erweiterte Verbreitung und Ausrichtung

Chan Kelvin C. K. ; Zhou Shangchen ; Xu Xiangyu ; Loy Chen Change

Zusammenfassung

Eine rekurrente Struktur ist eine beliebte Framework-Option für die Aufgabe der Videosuperauflösung. Die neueste Methode, BasicVSR, verwendet bidirektionale Propagation mit Merkmalsausrichtung (feature alignment), um Informationen aus dem gesamten Eingabevideo effektiv zu nutzen. In dieser Studie redesignen wir BasicVSR, indem wir zweiter Ordnung Gitterpropagation (second-order grid propagation) und flussgeleitete deformierbare Ausrichtung (flow-guided deformable alignment) vorschlagen. Wir zeigen, dass durch die Erweiterung des rekurrenten Frameworks mit der verbesserten Propagation und Ausrichtung man räumlich-zeitliche Informationen über fehlerhaft ausgerichtete Videoframes effektiver nutzen kann. Die neuen Komponenten führen zu einer verbesserten Leistung unter ähnlichen rechnerischen Einschränkungen. Insbesondere übertreffen unsere Modell BasicVSR++ BasicVSR um 0,82 dB im PSNR-Wert bei vergleichbarer Anzahl von Parametern. Neben der Videosuperauflösung generalisiert sich BasicVSR++ auch gut auf andere Videorestaurationsaufgaben wie die Verbesserung kompakter Videos. Bei NTIRE 2021 erzielte BasicVSR++ drei Siege und einen zweiten Platz in den Challenges zur Videosuperauflösung und zur Verbesserung kompakter Videos. Der Code und die Modelle werden veröffentlicht werden, um MMEditing bereitzustellen.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp