Outil D'éclairage D'image IC-Light, Remplacement De La Fusion D'arrière-plan Naturel
Présentation du projet
IC-Light Il s'agit d'un projet qui vise à réaliser un rééclairage d'image grâce à des modèles d'apprentissage automatique, dont le nom complet est Imposing Consistent Light. Il fournit deux catégories principales de modèles : les modèles d'éclairage conditionnels au texte et les modèles conditionnels à l'arrière-plan, qui ajustent l'éclairage des images de premier plan en fonction des indices de texte ou du contenu de l'arrière-plan, respectivement. Le projet est facile à utiliser via l'interface Gradio et télécharge automatiquement des modèles pré-entraînés. IC-Light fusionne les sources lumineuses dans un espace à plage dynamique élevée (HDR) pour obtenir des effets d'éclairage très cohérents, adaptés aux réglages de lumière et d'ombre dans une variété de scènes d'image.
IC-Light Les fonctionnalités incluent :
- Diversité des modèles : fournit des modèles d'éclairage conditionnés par le texte et par l'arrière-plan pour ajuster l'éclairage du premier plan par des repères de texte ou des images d'arrière-plan, respectivement.
- Cohérence : Grâce au mélange de sources lumineuses spatiales HDR, des effets d'éclairage et d'ombre très cohérents sont obtenus.
- Non intrusif : produit des images cohérentes sans indices subtils.
- Rééclairage de haute qualité : même les images avec des conditions d'éclairage différentes restent cohérentes, générant des effets de lumière et d'ombre naturels. .
Exemples d'effets
 |
 |
Cadre du modèle
IC-Light Le cadre du modèle est principalement basé sur les modèles de diffusion latente dans l'apprentissage automatique. Parmi eux, le modèle de condition de texte génère des effets de lumière et d'ombre en fonction des invites de texte saisies par l'utilisateur, et le modèle de condition d'arrière-plan détermine l'éclairage de premier plan à travers l'image d'arrière-plan. Les deux modèles effectuent des ajustements d'éclairage dans l'espace latent via un perceptron multicouche (MLP) pour garantir la cohérence de l'éclairage.
Étapes de course
1. Cliquez sur « Cloner » dans le coin supérieur droit du projet, puis cliquez sur « Suivant » pour effectuer les étapes suivantes : Informations de base > Sélectionner la puissance de calcul > Réviser. Enfin, cliquez sur « Continuer » pour ouvrir ce projet dans le conteneur personnel.
2. Une fois l'allocation des ressources terminée, l'arrière-plan initialisera automatiquement le modèle (environ 80 secondes), puis vous pourrez utiliser directement l'adresse API fournie par la plateforme pour accéder à la page d'opération (l'authentification par nom réel doit avoir été effectuée, et il n'est pas nécessaire d'ouvrir l'espace de travail pour cette étape)
3. Téléchargez l'image cible et l'image d'arrière-plan pour insérer l'image d'arrière-plan.
IC-Light La force de guidage de l'image générée peut être contrôlée en fonction de l'échelle CFG d'entrée. Plus précisément, il détermine dans quelle mesure le modèle suit l’invite ou la description de l’entrée. Des valeurs CFG plus élevées produiront des images plus proches de l’invite, mais peuvent entraîner une perte de naturel de l’image ; des valeurs inférieures produiront des images plus diversifiées et naturelles, mais peuvent s'écarter de l'invite. En ajustant l’échelle CFG, les utilisateurs peuvent trouver un équilibre entre l’effet de génération et la cohérence rapide.
- Les paramètres optionnels sont les suivants :
- Les paramètres personnalisés sont les suivants :
