1. Introduction au tutoriel

SUPIR (Scaling-UP Image Restoration) est une méthode révolutionnaire de restauration d'image et d'amélioration de la qualité. Le modèle construit utilise le modèle génératif à grande échelle StableDiffusion-XL (SDXL) et la technologie d'extension de modèle, et permet une restauration de haute qualité d'images de faible qualité grâce à l'apprentissage en profondeur et aux méthodes multimodales. Il peut agrandir les images basse résolution en haute résolution tout en conservant les détails et le réalisme de l'image. SUPIR peut gérer diverses situations de dégradation complexes telles que le flou, le bruit, la compression, etc., permettant ainsi une restauration d'image de haute qualité et une mise à l'échelle des images basse résolution vers une haute résolution tout en conservant les détails et le réalisme de l'image.

La méthode prend également en charge un contrôle précis de la restauration d'image grâce à des invites textuelles, qui peuvent ajuster divers aspects de la restauration en fonction des entrées de l'utilisateur. SUPIR a été lancé conjointement par des chercheurs des Instituts de technologie avancée de Shenzhen de l'Académie chinoise des sciences, du Laboratoire A1 de Shanghai, de l'Université de Sydney, de l'Université polytechnique de Hong Kong, de Tencent, du Laboratoire ARC et de l'Université chinoise de Hong Kong.Vers l'excellence : mise à l'échelle des modèles pour une restauration d'images photoréalistes en milieu naturel", a été accepté par CVPR 2024.

Ce tutoriel utilise les ressources du A6000 double SIM.

👉 Le projet fournit deux modèles de modèles :

• SUPIR-v0Q : Paramètres d'entraînement par défaut. Il possède une grande capacité de généralisation et une qualité d'image élevée dans la plupart des cas.
• SUPIR-v0F : formé avec des paramètres de qualité d'éclairage réduits. L'encodeur Stage 1 SUPIR-v0F préserve plus de détails même lorsque la qualité de l'éclairage diminue.

Exemples de projets

2. Étapes de l'opération

1. Après avoir démarré le conteneur, cliquez sur l'adresse API pour accéder à l'interface Web

Si « Modèle » n'est pas affiché, cela signifie que le modèle est en cours d'initialisation. Étant donné que le modèle est grand, veuillez patienter environ 1 à 2 minutes et actualiser la page.

2. Après être entré sur la page Web, vous pouvez démarrer une conversation avec le modèle

Comment utiliser

Échange et discussion

🖌️ Si vous voyez un projet de haute qualité, veuillez laisser un message en arrière-plan pour le recommander ! De plus, nous avons également créé un groupe d’échange de tutoriels. Bienvenue aux amis pour scanner le code QR et commenter [Tutoriel SD] pour rejoindre le groupe pour discuter de divers problèmes techniques et partager les résultats de l'application↓

Informations sur la citation

@misc{yu2024scaling,
title={Scaling Up to Excellence: Practicing Model Scaling for Photo-Realistic Image Restoration In the Wild},
author={Fanghua Yu and Jinjin Gu and Zheyuan Li and Jinfan Hu and Xiangtao Kong and Xintao Wang and Jingwen He and Yu Qiao and Chao Dong},
year={2024},
eprint={2401.13627},
archivePrefix={arXiv},
primaryClass={cs.CV}
}