HyperAIHyperAI

Command Palette

Search for a command to run...

SwinIR: Bildwiederherstellung mit Swin-Transformer

Liang Jingyun ; Cao Jiezhang ; Sun Guolei ; Zhang Kai ; Van Gool Luc ; Timofte Radu

Zusammenfassung

Die Bildrestauration ist ein langjähriges Problem der niedrigstufigen Bildverarbeitung, das darauf abzielt, hochwertige Bilder aus niedrigwertigen Bildern (z. B. verkleinerten, verrauschten und komprimierten Bildern) wiederherzustellen. Obwohl die derzeit besten Methoden der Bildrestauration auf Faltungsneuronalen Netzen basieren, wurden bisher nur wenige Versuche mit Transformers unternommen, die bei hochstufigen Visionssystemaufgaben beeindruckende Leistungen erzielen. In dieser Arbeit schlagen wir ein leistungsfähiges Basismodell namens SwinIR für die Bildrestauration vor, das auf dem Swin-Transformer basiert. SwinIR besteht aus drei Komponenten: flache Merkmalsextraktion, tiefe Merkmalsextraktion und Rekonstruktion von hochwertigen Bildern. Insbesondere besteht das Modul zur tiefen Merkmalsextraktion aus mehreren residuellen Swin-Transformer-Blöcken (RSTB), wobei jeder Block mehrere Swin-Transformer-Schichten sowie eine residuelle Verbindung enthält. Wir führen Experimente an drei repräsentativen Aufgaben durch: Bildsuperresolution (einschließlich klassischer, leichtgewichtiger und realweltlicher Bildsuperresolution), Bildentrauschung (einschließlich Graustufen- und Farbbildentrauschung) sowie Reduktion von JPEG-Kompressionsartefakten. Die experimentellen Ergebnisse zeigen, dass SwinIR bei verschiedenen Aufgaben die derzeit besten Methoden um bis zu 0,14~0,45 dB übertrifft, während die Gesamtanzahl der Parameter um bis zu 67 % reduziert werden kann.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp