HyperAIHyperAI

Command Palette

Search for a command to run...

Lernen von verzerrten Leitungen für die Wiederherstellung von Gesichtern ohne Bezugsbild

Li Xiaoming ; Liu Ming ; Ye Yuting ; Zuo Wangmeng ; Lin Liang ; Yang Ruigang

Zusammenfassung

Dieses Papier untersucht das Problem der blinden Gesichtsrestauration aus einem unbeschränkten unscharfen, rauschigen, niedrigen Auflösungsvermögens oder komprimierten Bild (d.h., degradierte Beobachtung). Um eine bessere Wiederherstellung feiner Gesichtsdetails zu erreichen, ändern wir die Problemstellung, indem wir sowohl die degradierte Beobachtung als auch ein hochwertiges Leitbild derselben Identität als Eingabe für unser geleitetes Gesichtsrestaurationsnetzwerk (GFRNet) verwenden. Allerdings sind die degradierte Beobachtung und das Leitbild in der Regel in Hinsicht auf Pose, Beleuchtung und Ausdruck unterschiedlich, was dazu führt, dass einfache CNNs (z.B. U-Net) versagen, feine und identitätsbewusste Gesichtsdetails wiederherzustellen. Um dieses Problem zu lösen, enthält unser GFRNet-Modell sowohl ein Verformungssubnetzwerk (WarpNet) als auch ein Rekonstruktionssubnetzwerk (RecNet). Das WarpNet wird eingeführt, um das Flussfeld zur Verformung des Leitbilds in korrekter Pose und Mimik (d.h., verformte Führung) vorherzusagen. Das RecNet nimmt die degradierte Beobachtung und die verformte Führung als Eingabe entgegen, um das Restaurationsergebnis zu erzeugen. Da das Ground-Truth-Flussfeld nicht verfügbar ist, werden Landmark-Loss zusammen mit Total-Variation-Regularisierung verwendet, um das Lernen des WarpNets zu leiten. Darüber hinaus, um das Modell für blinde Restauration anwendbar zu machen, wird unser GFRNet auf synthetischen Daten mit vielfältigen Einstellungen bezüglich Unschärfe-Kern, Rauschpegel, Downsampling-Skalierungsfaktor und JPEG-Qualitätsfaktor trainiert. Experimente zeigen, dass unser GFRNet nicht nur den neuesten Methoden der Bild- und Gesichtsrestauration überlegen ist, sondern auch visuell fotorealistische Ergebnisse bei realen degradierten Gesichtsbildern erzeugt.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Lernen von verzerrten Leitungen für die Wiederherstellung von Gesichtern ohne Bezugsbild | Paper | HyperAI