HyperAIHyperAI

Command Palette

Search for a command to run...

vor 4 Monaten

Selektives Frequenznetzwerk für die Bildrestaurierung

{Alois Knoll Kai Huang Xiaochun Cao Xinwei Gao Wenqi Ren Zhenshan Bing Yi Tao Yuning Cui}

Abstract

Die Bildrestaurierung zielt darauf ab, das latente scharfe Bild aus seiner beeinträchtigten Version wiederherzustellen. Neben der Bearbeitung dieser lang bestehenden Aufgabe im räumlichen Bereich suchen einige Ansätze Lösungen im Frequenzbereich, berücksichtigt man doch die erheblichen Unterschiede zwischen den Spektren von scharfen und verunreinigten Bildpaaren. Allerdings nutzen diese Arbeiten üblicherweise Transformationstechniken, beispielsweise die Wavelet-Transformation, um Merkmale in mehrere Frequenzkomponenten zu zerlegen, was nicht flexibel genug ist, um die informativsten Frequenzanteile gezielt zur Wiederherstellung auszuwählen. In diesem Artikel entwickeln wir ein mehrfach verzweigtes und kontextbewusstes Modul, das Merkmale dynamisch und lokal in getrennte Frequenzunterbänder aufspaltet und anschließend die nützlichen Komponenten mittels kanalweiser Aufmerksamkeitsgewichte verstärkt. Darüber hinaus schlagen wir ein äußerst einfaches Entkoppelungs- und Modulationsmodul vor, um die Empfindlichkeitsfeldgröße durch globale und fensterbasierte Durchschnitts-Pooling-Operationen zu erweitern und so große Degradationsunschärfen effektiv zu bewältigen. Durch die Integration dieser beiden neu entwickelten Module in eine U-Net-Architektur erreicht das vorgeschlagene selektive Frequenznetzwerk (SFNet) hervorragende Ergebnisse gegenüber aktuellen State-of-the-Art-Algorithmen bei fünf Aufgaben der Bildrestaurierung, darunter Einzelbild-Defokus-Entschärfung, Bildentnebelung, Bildbewegungs-Entschärfung, Bildentfrostung und Bildentregen.

Benchmarks

BenchmarkMethodikMetriken
deblurring-on-goproSFNet
PSNR: 33.27
SSIM: 0.963
deblurring-on-rsblurSFNet
Average PSNR: 34.35
image-dehazing-on-sots-indoorSFNet
PSNR: 41.24
SSIM: 0.996
image-dehazing-on-sots-outdoorSFNet
PSNR: 40.05
SSIM: 0.996
single-image-deraining-on-rain100lSFNet
PSNR: 38.21
SSIM: 0.974

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Selektives Frequenznetzwerk für die Bildrestaurierung | Forschungsarbeiten | HyperAI