HyperAIHyperAI

Command Palette

Search for a command to run...

Dynamische Szenen-Entschärfung mithilfe räumlich variabler rekurrenter neuronaler Netzwerke

Rynson W. H. Lau Ming-Hsuan Yang Jiawei Zhang Jimmy Ren Linchao Bao Jinshan Pan Yibing Song

Zusammenfassung

Aufgrund der ortsabhängigen Verschmierung, die durch Kameraverschiebungen und Objektbewegungen bei unterschiedlichen Szenentiefen verursacht wird, ist die Entschärfung von Bildern aus dynamischen Szenen eine herausfordernde Aufgabe. Obwohl jüngste Ansätze auf Basis tiefer neuronalen Netze erhebliche Fortschritte auf diesem Gebiet erzielt haben, sind ihre Modelle meist groß und rechenintensiv. In diesem Artikel stellen wir ein neuartiges ortsabhängiges neuronales Netzwerk vor, um dieses Problem zu lösen. Das vorgeschlagene Netzwerk besteht aus drei tiefen convolutionalen neuronalen Netzen (CNNs) und einem rekurrenten neuronalen Netzwerk (RNN). Das RNN fungiert als Deconvolutionsoperator, der auf Merkmalskarten angewendet wird, die von einem der CNNs aus dem Eingabebild extrahiert wurden. Ein weiteres CNN lernt dabei an jeder Position die Gewichte für das RNN. Dadurch wird das RNN ortsabhängig und kann den Entschärfungsprozess mit ortsabhängigen Kerneln implizit modellieren. Das dritte CNN dient zur Rekonstruktion der finalen entfalteten Merkmalskarten in das restaurierte Bild. Das gesamte Netzwerk ist end-to-end trainierbar. Unsere Analyse zeigt, dass das vorgeschlagene Netzwerk selbst bei geringer Modellgröße einen großen Empfindungsfeld (receptive field) aufweist. Quantitative und qualitative Bewertungen an öffentlichen Datensätzen belegen, dass die vorgeschlagene Methode im Vergleich zu aktuellen State-of-the-Art-Algorithmen hinsichtlich Genauigkeit, Geschwindigkeit und Modellgröße überzeugt.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Dynamische Szenen-Entschärfung mithilfe räumlich variabler rekurrenter neuronaler Netzwerke | Paper | HyperAI