HyperAIHyperAI

Command Palette

Search for a command to run...

Resfusion: Denoising Diffusion Probabilistische Modelle für Bildrestauration basierend auf a priori Residualem Rauschen

Zhenning Shi Haoshuai Zheng Chen Xu Changsheng Dong Bin Pan Xueshuo Xie Along He Tao Li Huazhu Fu

Zusammenfassung

Kürzlich hat sich die Forschung zu Denoising-Diffusionsmodellen auf das Gebiet der Bildrestauration ausgeweitet. Traditionelle diffusionsbasierte Methoden zur Bildrestauration nutzen verschlechterte Bilder als bedingte Eingabe, um den Rückwärts-Generierungsprozess effektiv zu steuern, ohne den ursprünglichen Denoising-Diffusion-Prozess zu modifizieren. Allerdings enthalten die verschlechterten Bilder bereits Niederfrequenzinformationen, sodass das Starten vom Gaußschen Weißrauschen zu einer Erhöhung der Sampling-Schritte führt. Wir schlagen Resfusion vor, ein allgemeines Framework, das den Residualterm in den Diffusionsvorwärtsprozess integriert und den Rückwärtsprozess direkt von den rauschigen verschlechterten Bildern startet. Die Form unseres Inferenzprozesses ist konsistent mit dem DDPM (Denoising Diffusion Probabilistic Model). Wir haben ein gewichtetes Residualrauschen eingeführt, genannt resnoise, als Vorhersageziel und geben die quantitative Beziehung zwischen dem Residualterm und dem Rauschterm in resnoise explizit an. Durch die Nutzung einer glatten Äquivalenztransformation bestimmt Resfusion den optimalen Beschleunigungsschritt und behält die Integrität vorhandener Rauschverteilungen bei, was Prozesse des Trainings und der Inferenz vereint. Die experimentellen Ergebnisse zeigen, dass Resfusion mit nur fünf Sampling-Schritten wettbewerbsfähige Leistungen auf den Datensätzen ISTD (Image Shadow and Reflection Removal Dataset), LOL (Low-Light Image Enhancement Dataset) und Raindrop aufweist. Darüber hinaus kann Resfusion leicht auf Bildgenerierung angewendet werden und zeichnet sich durch starke Vielseitigkeit aus. Unser Code und Modell sind unter https://github.com/nkicsl/Resfusion verfügbar.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Resfusion: Denoising Diffusion Probabilistische Modelle für Bildrestauration basierend auf a priori Residualem Rauschen | Paper | HyperAI