Flux a récemment reçu de nombreux éloges de la part des amateurs de modélisation. La qualité de ses images surpasse celles de SD3 et MJ. Beaucoup considèrent Flux comme le SD3 tant attendu. C’est pourquoi j’ai moi-même été très curieux de tester Flux, et je partage avec vous le processus d’installation.
Image de référence du site officiel :
Page d'accueil de Flux : https://blackforestlabs.ai/
La start-up d'intelligence artificielle Black Forest Labs a lancé son premier modèle d'IA de texte à image : FLUX.1. Basée en Allemagne, cette entreprise fondée par des chercheurs ayant participé au développement de Stable Diffusion, vise à créer une IA générative avancée pour les images et les vidéos.
Le modèle est disponible en trois versions : Pro, Dev et Schnell.
Les graphiques de Black Forest affirment que ses modèles Pro et Dev sont les meilleurs générateurs d'images à ce jour, tandis que son modèle Schnell, moins puissant, se situe entre Midjourney v5 et Ideogram.
Description des trois versions :
Pro : meilleure qualité d'image, mais fermé (source close), API payante.
Dev : open source, mais non commercialisable. Nécessite au minimum 24 Go de VRAM.
Schnell : open source et commercialisable.
Pour une expérience en ligne, des sites web sont disponibles :
Schnell : https://replicate.com/black-forest-labs/flux-schnell
Dev : https://replicate.com/black-forest-labs/flux-dev
Pro : https://replicate.com/black-forest-labs/flux-pro
Installation locale
La dernière version de ComfyUI est désormais compatible avec le modèle FLux. Une simple mise à jour du noyau suffit.
Commencez par mettre à jour ComfyUI.
Si vous utilisez le pack d'installation officiel de ComfyUI, cliquez sur le bouton de mise à jour.
Si vous utilisez le lanceur d'Akiha, mettez à jour le noyau comme indiqué sur l'image.
L'exécution locale est probablement impossible avec une faible quantité de VRAM. Mon ordinateur ayant une configuration correcte, je teste la version Schnell.
Téléchargement du grand modèle : https://huggingface.co/black-forest-labs/FLUX.1-schnell/tree/main
Ce lien fournit un grand modèle de 23,8 Go et un modèle VAE de 335 Mo. Vous devez télécharger les deux.
Une fois le téléchargement terminé, placez le grand modèle dans le dossier : ComfyUI/models/unet/.
Le VAE doit être placé dans le dossier ComfyUI/models/vae/.
Si votre ordinateur a des performances moyennes, vous pouvez télécharger la version allégée Flux-fp8 (11,9 Go seulement) : https://huggingface.co/Kijai/flux-fp8/blob/main/flux1-dev-fp8.safetensors
Le VAE reste ae.sft.
En plus du grand modèle et du VAE, vous devez télécharger le modèle Clip : https://huggingface.co/comfyanonymous/flux_text_encoders/tree/main
Il s'agit en fait du modèle Clip de SD3. Pour une configuration performante, choisissez fp16, pour une configuration moyenne, choisissez fp8. clip_l est obligatoire.
Après le téléchargement, placez-les dans le dossier : ComfyUI\models\clip.
Une fois le grand modèle, le VAE et le Clip installés, vous pouvez exécuter votre workflow. Le site officiel fournit un workflow ComfyUI simplifié : https://comfyanonymous.github.io/ComfyUI_examples/flux/
Enregistrez l'image fournie sur le site officiel.
Faites ensuite glisser l'image dans ComfyUI. Si vous souhaitez éviter ces manipulations, vous pouvez rejoindre notre groupe de discussion pour obtenir directement le workflow.
Dans le workflow, assurez-vous que les modèles sont correctement chargés, puis cliquez sur « Ajouter à la file d'attente » pour lancer la génération.
Résultats de génération d'images
Invite 1 : a bottle with a rainbow galaxy inside it on top of a wooden table on a table in the middle of a modern kitchen
Invite 2 : photograph of a black board in an old classroom. On the black board in chalk are the words “Lets make some really pretty stuff together” with a red chalk heart after the words. Sunlight is streaming in from the window
Invite 3 : filmic photo of a group of three women on a street downtown, they are holding their hands up the camera
Invite 4 : macro photography of a miniature little village on top of a flower
Version FP8, Invite 5 : close up fujifilm photo of a mans eye and fac
Invite 6 : beautiful anime artwork, a cute anime girl standing alone at night darkness wearing an oversized black raincoat with a small bag. she is holding a black umbrella, the umbrella has multicolored LED hidden inside that shine down on her, small rose petals flutter through the air around her, anime screencap style, red eyes, medium hair
Conclusion
Globalement, les tests ont donné d'excellents résultats. FLUX est plus performant que SD3.
Génération des mains plus stable, moins de malformations.
La version distillée est plus rapide : moins de 30 secondes. La version Dev est plus lente, mais la qualité est meilleure.
Forte compatibilité du modèle : excellents résultats pour les styles : anime, portraits, réaliste, paysages.
----------------------------------------------------------------------------------------
Tutoriels IA de Stationmaster Material, une plateforme de tutoriels d'illustration IA de Stationmaster Home
Nombreux tutoriels IA gratuits, contenu régulièrement mis à jour.
Pour en savoir plus sur les tutoriels d'illustration IA, veuillez visiter le site web de Stationmaster Material AI Tutorials :