HyperAI

IC-Light V2 : Démonstration De Mise À Niveau Du Contrôle D'éclairage Par IA

GitHub
Étoiles

1. Introduction au tutoriel

IC-Light, dont le nom complet est Imposing Consistent Light, est un projet développé par l'auteur de ControlNet « Minshen » (Zhang Lvmin) en 2024. Il vise à réaliser un rééclairage d'image grâce à des modèles d'apprentissage automatique. Il peut contrôler avec précision les effets d'éclairage dans les images grâce à la technologie IA. Les résultats pertinents de l'article sontMise à l'échelle de l'entraînement en milieu naturel pour l'harmonisation et l'édition de l'éclairage basé sur la diffusion en imposant un transport de lumière cohérent", et a obtenu un score parfait de [10,10,10,10] à l'ICLR 2024.

Ce tutoriel est une version améliorée d'IC-Light v2. Par rapport à l'IC-Light original, IC-Light v2 est formé sur la base du nouveau modèle Flux, ce qui lui permet d'identifier plus précisément les caractéristiques d'éclairage et de tonalité des images et d'obtenir des effets de fusion plus détaillés et plus réalistes. IC-Light v2 dispose d'un VAE à 16 canaux et d'une haute résolution native, ce qui permet de conserver parfaitement les détails de l'image tels que la texture de la peau, les ombres et les hautes lumières après avoir modifié les tons d'éclairage.

Exemple d'effet :

Rapide: belle femme, visage détaillé, ambiance chaleureuse, à la maison, chambre
Préférence d'éclairage: Gauche

Exemple d'éclairage

2. Étapes de l'opération

1. Démarrez le conteneur et cliquez sur l'adresse API pour accéder à l'interface Web

Interface Web

2. L'IA contrôle l'éclairage

进入 web 界面后,按照以下步骤进行操作:
Étapes de contrôle de l'éclairage
主要功能参数

IC-Light 提供了多个可调节的参数,帮助用户精细化控制图像效果。
  • Rapide:
    Décrivez les principales caractéristiques de l’image. Nous fournissons plusieurs descriptions de sujets (telles que belle femme, visage détaillé, bel homme, visage détaillé) et des dizaines de descriptions d'éclairage. Les utilisateurs peuvent choisir en fonction des exigences de la scène.
  • Préférence d'éclairage:
    Quatre préférences d'éclairage sont disponibles : haut, bas, gauche et droite. Les utilisateurs peuvent choisir la direction d’éclairage appropriée en fonction de leurs besoins.
    REMARQUE : les préférences d'éclairage sont des paramètres potentiels initiaux, les résultats réels peuvent varier en fonction d'autres paramètres.
  • Images:
    Le nombre d'images générées.
  • Graine:
    Graine aléatoire, utilisée pour générer des résultats reproductibles.
  • Largeur/hauteur de l'image:
    Définissez la largeur et la hauteur de l'image.其他高级参数:
  • Mesures25
    Spécifie le nombre d'itérations nécessaires au modèle pour générer des images. Plus il y a d'étapes, plus l'image sera détaillée, mais le temps de génération augmentera également.
  • Échelle CFG2
    Force de guidage du texte. Des valeurs plus faibles rendent les images générées plus créatives, des valeurs plus élevées rendent les images plus proches du texte d'entrée.
  • Débruitage basse résolution (pour latence initiale)0.9
    Force de débruitage pour les images basse résolution. Plus la valeur est élevée, plus le débruitage est fort et plus l'image est fluide.
  • Échelle haute résolution1.5
    Facteur d'échelle pour les images haute résolution. Plus la valeur est grande, plus l'image est agrandie.
  • Débruitage haute résolution0.5
    La force de la débruitisation lors de la génération d'images haute résolution. Plus la valeur est élevée, plus le débruitage est fort, mais les détails de l'image peuvent devenir flous.
  • Ajout d'une invitebest quality
    Ajoutez des indices positifs pour aider à générer des images de meilleure qualité.
  • Invite négativelowres, bad anatomy, bad hands, cropped, worst quality
    Conseils négatifs pour réduire les problèmes tels que la faible résolution, la mauvaise anatomie, les détails médiocres des mains, le découpage, la mauvaise qualité, etc. Ensuite, vous devez fournir une description des caractéristiques du sujet (par exemple, une belle femme, un visage détaillé) et une description des caractéristiques d'éclairage (par exemple, le soleil provenant de la fenêtre).

Voici un exemple de démonstration :

Exemple d'éclairage

invite : humains mystérieux, atmosphère chaleureuse, néons, ville.

Préférence d'éclairage : la préférence d'éclairage est à gauche et l'image générée est lumineuse à gauche et sombre à droite.


4. Échange et discussion

🖌️ Si vous trouvez un projet de qualité, laissez un message en arrière-plan pour le recommander ! De plus, nous avons également créé un groupe d’échange de tutoriels. Bienvenue à tous pour scanner le code QR pour rejoindre le groupe, commenter [Tutoriel SD], discuter des problèmes techniques avec tout le monde et partager les résultats de l'application !

Rejoignez le groupe