Comme vous le savez, le modèle ControlNet SD1.5 n'est pas compatible avec SDXL. Alors, comment utiliser ControlNet avec SDXL ? Ne vous inquiétez pas, ce tutoriel vous explique comment utiliser ControlNet avec SDXL, en prenant Canny comme exemple.
Mise à jour de ControlNet
Commencez par mettre à jour ControlNet. Dans le pack d'intégration, cliquez sur « Gestion des versions » —> « Extensions » —> « Mise à jour en un clic ».
Vous pouvez également le faire dans l'interface WebUI : « Extensions » —> « Installé » —> « Vérifier les mises à jour » —> « Appliquer » —> Redémarrer l'interface WebUI.
Téléchargement du modèle ControlNet pour SDXL
Vous pouvez télécharger le modèle ControlNet pour SDXL via le lien suivant :
lllyasviel/sd_control_collection at main (huggingface.co)
Vous pouvez placer le modèle dans :
stable-diffusion-webui\extensions\sd-webui-controlnet\models
ou
stable-diffusion-webui\models\ControlNet
Mais avec autant de modèles disponibles, comment faire son choix ?
Modèle Canny
Prenons l'exemple du modèle Canny. Il n'est pas nécessaire de tout télécharger. J'ai déjà testé les performances et la vitesse de ces modèles.
Test de vitesse
Taille du modèle
Bien que `diffusers_xl_canny_full` offre d'excellents résultats, il est malheureusement le plus volumineux (2,5 Go) et le plus lent. Si la qualité est votre priorité absolue et que votre configuration informatique est performante, vous pouvez l'envisager.
Le modèle `kohya_controllllite` est très léger. Compte tenu de leur petite taille, leurs performances sont excellentes.
Recommandations pour Canny SDXL
Utilisez `diffusers_xl_canny_full` si sa grande taille et sa vitesse plus lente ne vous dérangent pas.
Utilisez `kohya_controllllite_xl_canny` si vous avez besoin d'un modèle plus petit et plus rapide, et que vous pouvez accepter de légères modifications de style.
Utilisez `sai_xl_canny_128lora` pour un fichier de taille raisonnable tout en réduisant les modifications de style.
Le paramètre de poids de contrôle est crucial pour générer de bonnes images. La plupart des modèles nécessitent une valeur inférieure à 1.
-------------------------------------------------------------------------------------------
Pour en savoir plus sur les tutoriels IA, visitez notre site web :