1. Einführung in das Tutorial

SUPIR (Scaling-UP Image Restoration) ist eine bahnbrechende Methode zur Bildrestauration und Qualitätsverbesserung. Das erstellte Modell verwendet das groß angelegte generative Modell StableDiffusion-XL (SDXL) und die Modellerweiterungstechnologie und erreicht durch Deep Learning und multimodale Methoden eine hochwertige Wiederherstellung von Bildern geringer Qualität. Es kann Bilder mit niedriger Auflösung auf eine hohe Auflösung hochskalieren und dabei Bilddetails und Realismus beibehalten. SUPIR kann mit verschiedenen komplexen Verschlechterungssituationen wie Unschärfe, Rauschen, Komprimierung usw. umgehen und erreicht dadurch eine qualitativ hochwertige Bildwiederherstellung und eine Hochskalierung von Bildern mit niedriger Auflösung auf eine hohe Auflösung, wobei Bilddetails und Realismus erhalten bleiben.

Die Methode unterstützt außerdem eine detaillierte Steuerung der Bildwiederherstellung durch Textaufforderungen, die verschiedene Aspekte der Wiederherstellung basierend auf Benutzereingaben anpassen können. SUPIR wurde gemeinsam von Forschern der Shenzhen Institutes of Advanced Technology der Chinesischen Akademie der Wissenschaften, des Shanghai A1 Laboratory, der Universität Sydney, der Hong Kong Polytechnic University, von Tencent, des ARC Laboratory und der Chinesischen Universität Hongkong ins Leben gerufen.Skalierung bis zur Exzellenz: Üben der Modellskalierung für die fotorealistische Bildrestauration in der Praxis", wurde von CVPR 2024 angenommen.

Dieses Tutorial verwendet die Ressourcen für die Dual-SIM A6000.

👉 Das Projekt bietet zwei Modellmodelle:

• SUPIR-v0Q: Standard-Trainingseinstellungen. Es verfügt in den meisten Fällen über eine hohe Generalisierungsfähigkeit und eine hohe Bildqualität.
• SUPIR-v0F: Trainiert mit reduzierten Lichtqualitätseinstellungen. Der Stage 1-Encoder SUPIR-v0F bewahrt mehr Details, selbst wenn die Lichtqualität nachlässt.

Projektbeispiele

2. Bedienungsschritte

1. Klicken Sie nach dem Starten des Containers auf die API-Adresse, um die Weboberfläche aufzurufen

Wenn „Modell“ nicht angezeigt wird, bedeutet dies, dass das Modell initialisiert wird. Da das Modell groß ist, warten Sie bitte etwa 1–2 Minuten und aktualisieren Sie die Seite.

2. Nachdem Sie die Webseite aufgerufen haben, können Sie ein Gespräch mit dem Modell beginnen

Anwendung

Austausch und Diskussion

🖌️ Wenn Sie ein hochwertiges Projekt sehen, hinterlassen Sie bitte im Hintergrund eine Nachricht, um es weiterzuempfehlen! Darüber hinaus haben wir auch eine Tutorien-Austauschgruppe ins Leben gerufen. Willkommen, Freunde, scannen Sie den QR-Code und kommentieren Sie [SD-Tutorial], um der Gruppe beizutreten, verschiedene technische Probleme zu besprechen und Anwendungsergebnisse auszutauschen ↓

Zitationsinformationen

@misc{yu2024scaling,
title={Scaling Up to Excellence: Practicing Model Scaling for Photo-Realistic Image Restoration In the Wild},
author={Fanghua Yu and Jinjin Gu and Zheyuan Li and Jinfan Hu and Xiangtao Kong and Xintao Wang and Jingwen He and Yu Qiao and Chao Dong},
year={2024},
eprint={2401.13627},
archivePrefix={arXiv},
primaryClass={cs.CV}
}