Guide de choix d'un modèle Stable Diffusion : de la qualité d'image à la licence

Quand on choisit un modèle Stable Diffusion, l’angoisse de la VRAM, les doutes de licence et l’attrait des nouveaux modèles arrivent souvent ensemble. Vous pouvez tomber sur des dizaines de checkpoints sur Hugging Face sans savoir lequel télécharger. Vous pouvez aussi entendre que FLUX “dépasse Midjourney” en qualité d’image, sans savoir si votre GPU 8 Go le fera tourner. Et le cas le plus courant reste celui-ci : vous placez le fichier dans ComfyUI, puis une erreur “node introuvable” ou “chemin incorrect” apparaît.

Le choix d’un modèle ne se résume pas à un classement de qualité d’image. La question ici est plus concrète : dans un environnement ComfyUI local, comment choisir un modèle Stable Diffusion qui tourne vraiment sur votre matériel, respecte vos limites de licence, bénéficie d’un écosystème assez mûr et reste exploitable avec un risque maîtrisé ?

Comparatif des trois grandes familles de modèles

Commençons par une vue d’ensemble. Le tableau ci-dessous s’appuie sur les pages officielles, les cartes de modèles Hugging Face et les tests de la communauté. La colonne VRAM est volontairement prudente, car les valeurs réelles dépendent fortement de la résolution, du batch, de la précision et de l’optimisation du workflow.

Choix rapide :

• Débutant ou VRAM limitée (moins de 8 Go) : commencez par SDXL. L’écosystème est le plus mûr et le risque le plus faible.
• Carte grand public (8-16 Go) avec recherche de qualité : SD 3.5 Medium ou FLUX schnell.
• Qualité maximale avec besoin commercial : SD 3.5 Large ou FLUX schnell, à condition de vérifier la licence.

SDXL : le point de départ le plus mûr pour débuter

Stable Diffusion XL (SDXL) est le modèle 1.0 Base publié par Stability AI en 2023, avec environ 3,5B paramètres. Ce n’est pas le modèle à la meilleure qualité brute aujourd’hui, mais il garde un avantage difficile à remplacer : la maturité de l’écosystème.

Hugging Face propose de nombreux checkpoints, LoRA, VAE et modèles ControlNet basés sur SDXL. Civitai et d’autres plateformes communautaires publient encore régulièrement des dérivés SDXL. En pratique, cela signifie que beaucoup de workflows, nodes et tutoriels ComfyUI supposent une compatibilité SDXL.

La carte du modèle Stable Diffusion XL Base 1.0 indique que SDXL utilise la Stability AI Community License. Pour un usage personnel et de petits projets commerciaux, elle est généralement assez permissive. Mais si le revenu annuel dépasse le seuil fixé par Stability AI, une licence entreprise devient nécessaire. Le seuil peut changer, donc lisez la page officielle Stability AI License avant une mise en ligne.

Pourquoi recommander SDXL aux débutants :

1. Beaucoup de tutoriels : ComfyUI, WebUI, ControlNet et l’entraînement LoRA disposent de nombreux contenus dédiés à SDXL.
2. Nodes mûrs : les nodes de base de ComfyUI, comme CheckpointLoader, CLIPTextEncode et KSampler, prennent SDXL en charge de façon stable et génèrent moins d’erreurs.
3. Checkpoints communautaires nombreux : vous pouvez choisir des checkpoints déjà réglés pour l’anime, le réalisme ou l’illustration, sans entraîner depuis zéro.
4. Pression matérielle maîtrisable : en 1024x1024, 8 Go de VRAM peuvent suffire. Une résolution plus basse ou la quantification réduit encore la charge.

SDXL n’atteint pas la qualité de SD 3.5 Large ou FLUX, mais cet écart n’est pas toujours le cœur du problème. Si votre objectif est de faire tourner la chaîne, de comprendre ComfyUI et d’accumuler de l’expérience avant de changer de matériel, SDXL reste le départ le plus sûr.

Stable Diffusion 3.5 : la voie open weights de la nouvelle architecture officielle

Stable Diffusion 3.5 est la série la plus récente publiée par Stability AI en octobre 2024. Elle se décline en trois variantes :

Selon la page officielle Introducing Stable Diffusion 3.5, SD 3.5 utilise la nouvelle architecture MMDiT, avec une nette amélioration de la compréhension du texte et de la composition. Stability AI le présente comme une voie “open weights”, ce qui signifie que les poids peuvent être téléchargés et déployés localement sous conditions de licence.

La variante Medium est mieux adaptée aux cartes grand public. Avec 8 à 12 Go de VRAM, Medium peut tourner, tandis que Large demande plutôt 16 Go ou une quantification agressive. Si vous voulez tester la nouvelle architecture en local sans changer immédiatement de matériel, Medium est le choix le plus pragmatique.

La prise en charge de SD 3.5 dans ComfyUI progresse encore. Aujourd’hui, il faut souvent :

• Des nodes dédiés comme UNETLoader et CLIPLoader, plutôt que le CheckpointLoader traditionnel.
• Les text encoders correspondants, comme T5 XXL et CLIP L.
• Un workflow d’exemple officiel ou un tutoriel communautaire ciblant ce modèle.

SD 3.5 repose aussi sur la Stability AI Community License. Avant de publier, vérifiez :

Vultr - Serveur cloud NVMe haute performance, 32 emplacements mondiaux, déploiement Docker en un clic

Voir les tarifs →Pub

• Si vous dépassez le seuil annuel de revenus défini officiellement.
• Si votre cas d’entreprise nécessite une licence séparée.

Ne considérez pas cet article comme un avis juridique. Les conditions exactes sont celles de Stability AI License.

FLUX.1 : qualité de pointe, licence plus complexe

FLUX.1 est une famille de modèles de génération d’images proposée par Black Forest Labs. Ses trois voies n’ont pas le même rôle :

Le dépôt black-forest-labs/flux et la page officielle FLUX models montrent que :

• schnell a la licence la plus permissive : Apache 2.0, usage commercial autorisé, adapté au développement local et à l’usage personnel.
• dev interdit clairement l’usage commercial : le fichier FLUX.1 dev license indique un usage non commercial uniquement.
• pro ne publie pas les poids : il faut passer par l’API, avec prix et accès selon la page officielle.

Beaucoup de personnes pensent à tort que FLUX.1 est librement commercialisable. En réalité, seul schnell est relativement souple sous Apache 2.0. dev interdit l’usage commercial, et pro suppose une API payante ou un partenariat commercial. Avant de télécharger les poids, vérifiez quelle voie vous utilisez.

Pour utiliser FLUX dans ComfyUI, attention à :

• Des workflows et nodes dédiés, comme FluxGuidance ou FluxControlNet.
• Des text encoders supplémentaires, comme T5 XXL.
• Une pression matérielle plus forte : 12 Go+ de VRAM sont plus sûrs ; avec moins de VRAM, il faut souvent quantifier ou réduire la résolution.

FLUX vaut le détour si vous cherchez la qualité, acceptez d’étudier de nouveaux workflows et connaissez vos limites de licence. Mais pour un usage commercial, vérifiez d’abord si vous utilisez schnell ou dev, puis lisez le fichier de licence correspondant.

Guide matériel : la VRAM décide de la faisabilité

Les besoins en VRAM dépendent fortement de la résolution, du batch size, de la précision, de la quantification, de l’implémentation des nodes et de l’optimisation du workflow. Le tableau suivant est une estimation prudente, pas une garantie absolue.

Configuration prudente : baisser la résolution, par exemple en 512x512 ; passer le batch size à 1 ; activer la quantification fp8 ou bf16 ; utiliser un workflow optimisé.

Quantification agressive : réduire encore la précision et utiliser des nodes d’optimisation communautaires. Cela peut coûter en qualité ou en stabilité.

Si vous ne savez pas si votre matériel peut faire tourner un modèle, commencez par SDXL ou SD 3.5 Medium. Essayez les modèles plus lourds après avoir acquis de l’expérience. Ne forcez pas FLUX dev sur 6 Go de VRAM : les erreurs et plantages ressemblent à des problèmes logiciels, mais la cause est souvent matérielle.

Checklist des limites de licence commerciale

Le choix d’un modèle ne doit pas se limiter à la qualité d’image. Avant un usage commercial, vérifiez la licence point par point. Voici les limites clés :

1. Le seuil de revenus de la Stability AI Community License

SDXL et SD 3.5 relèvent tous deux de la Stability AI Community License. La page officielle indique un seuil de revenus annuel ; au-delà, une licence entreprise est nécessaire. Ce chiffre peut changer. Ne copiez pas une valeur depuis un article tiers ; lisez la page officielle Stability AI License avant de lancer votre projet.

Si votre projet génère des revenus commerciaux, par exemple service payant, publicité ou vente de produits, vérifiez :

• Le seuil actuel.
• Si une licence entreprise supplémentaire est nécessaire.
• S’il existe des limites par région ou par usage.

2. FLUX.1 dev interdit clairement l’usage commercial

Le fichier FLUX.1 dev license indique un usage non commercial uniquement. Beaucoup pensent : “si j’ai téléchargé les poids, je peux les utiliser commercialement”. C’est faux.

La voie dev convient seulement aux essais locaux, à la création personnelle et à la recherche de qualité visuelle. Pour un usage commercial, choisissez schnell (Apache 2.0) ou utilisez l’API pro payante. N’utilisez pas les poids dev dans un projet commercial, même “juste pour tester”.

3. FLUX.1 schnell a une licence plus souple

Le fichier FLUX.1 schnell license est sous Apache 2.0, avec moins de restrictions commerciales. Mais plus souple ne veut pas dire sans limite :

• Il faut conserver les mentions de licence.
• Il faut vérifier que votre usage respecte les autres conditions d’Apache 2.0.
• Ne confondez pas la licence de schnell avec celle de dev.

4. Les checkpoints communautaires n’héritent pas de la licence du modèle de base

Beaucoup supposent qu’un “checkpoint ultra réaliste” téléchargé sur Civitai hérite automatiquement de la Community License de SDXL. C’est faux.

Les checkpoints communautaires, y compris LoRA, modèles fusionnés et versions fine-tunées, doivent être vérifiés individuellement via leur carte de modèle. Certains créateurs indiquent “usage commercial interdit”, d’autres autorisent l’usage libre, d’autres demandent une attribution. La licence du modèle de base ne se transmet pas automatiquement aux dérivés.

Si vous téléchargez un checkpoint depuis un pack intégré, avant tout usage commercial :

• Retrouvez la carte originale de ce checkpoint.
• Vérifiez la déclaration de licence du créateur.
• En l’absence de licence claire, considérez-le comme non commercialisable.

5. Lire les pages officielles avant la mise en ligne

Cet article aide à comprendre les limites de licence ; il ne constitue pas un avis juridique. Les conditions, seuils, restrictions et mises à jour sont ceux des pages officielles :

Railway - Plateforme de déploiement moderne, sans opérations complexes, en ligne en quelques minutes

Commencer →Pub

• Stability AI License
• FLUX.1 dev license
• FLUX.1 schnell license

Ne reprenez pas de chiffres ou clauses de seconde main. Les licences peuvent évoluer, et votre date de lancement peut ne plus correspondre au contenu d’un ancien article.

Étapes pratiques dans ComfyUI

Une fois le modèle choisi, il faut le faire tourner. Voici les étapes dans ComfyUI :

Étape 1 : vérifier la structure des répertoires de modèles

D’après la documentation ComfyUI Models, les fichiers de modèles se placent généralement ici :

ComfyUI/models/
├── checkpoints/          # Modèles de base (.safetensors ou .ckpt)
├── lora/                 # Fine-tuning LoRA
├── vae/                  # Fichiers VAE
├── controlnet/           # Modèles ControlNet
├── unet/                 # Modèles UNET pour certaines nouvelles architectures
├── clip/                 # CLIP text encoder
└── ...

Chaque modèle peut demander un répertoire différent. Par exemple :

• SDXL ne demande généralement qu’un fichier .safetensors dans checkpoints/.
• SD 3.5 et FLUX peuvent nécessiter des répertoires supplémentaires comme unet/ et clip/.

Étape 2 : vérifier la source du téléchargement

Sources recommandées :

• Utilisez autant que possible les cartes officielles Hugging Face, comme Stable Diffusion XL Base 1.0 et Stable Diffusion 3.5 Large.
• Civitai propose beaucoup de checkpoints communautaires, mais il faut vérifier la licence sur chaque carte de modèle.

Sources non recommandées :

• Packs “tout-en-un” ou “one-click” sans licence claire.
• Liens de stockage cloud sans source.
• Partages avec seulement des captures d’écran, sans carte de modèle.

Étape 3 : les nouveaux modèles peuvent demander une préparation supplémentaire

Télécharger un fichier .safetensors ne garantit pas que le modèle tourne immédiatement. Les nouveaux modèles comme SD 3.5 et FLUX ont souvent besoin de :

• Télécharger le workflow .json correspondant depuis un exemple officiel ou un tutoriel communautaire.
• Installer les nodes ComfyUI requis. Certains nouveaux modèles dépendent de nodes récents ; s’il en manque un, l’erreur “node not found” apparaît.
• Télécharger séparément des text encoders comme T5 XXL et CLIP L, puis les placer dans les répertoires correspondants.

Si vous voyez “node not found” ou “model path incorrect”, vérifiez d’abord :

• Si le workflow correspond bien au modèle.
• Si des fichiers supplémentaires, comme text encoder ou VAE, manquent.
• Si le fichier du modèle est dans le bon répertoire.

Étape 4 : checklist de validation pour la première image

Avant de l’utiliser dans un projet réel, testez une seule image :

1. Lancez ComfyUI et chargez le workflow correspondant.
2. Vérifiez qu’aucune erreur de node manquant n’apparaît.
3. Saisissez un prompt simple, comme “a cat sitting on a chair”.
4. Lancez le workflow et attendez la fin de la génération.
5. Vérifiez la vitesse de génération, l’usage VRAM et la qualité d’image.

En cas d’erreur :

• Si la VRAM manque, baissez la résolution, réduisez le batch size ou activez la quantification.
• Si un node manque, installez le package de nodes correspondant ou mettez ComfyUI à jour.
• Si le chemin du modèle est incorrect, vérifiez que le fichier est dans le bon répertoire.

Si vous connaissez déjà les bases de ComfyUI, consultez Guide ComfyUI débutant : de l’installation à votre première image Stable Diffusion et Guide de réutilisation des workflows ComfyUI : import JSON, nodes manquants et chemins de modèles. Ils détaillent l’installation, les chemins de modèles et le dépannage des imports de workflow.

FAQ : sept questions fréquentes

1. Quel modèle choisir avec 8 Go de VRAM ?

Privilégiez SDXL ou SD 3.5 Medium. FLUX schnell demande une quantification agressive ou une résolution plus basse avec 8 Go, et il est moins stable que SDXL. SD 3.5 Large et FLUX dev sont plus sûrs à partir de 12 Go.

2. SDXL est-il déjà dépassé ?

Sa qualité brute est inférieure à SD 3.5 Large et FLUX, mais son écosystème reste le plus mûr. Les tutoriels, nodes, checkpoints, LoRA et ressources ControlNet sont bien plus nombreux que pour les nouveaux modèles. Pour débuter ou s’entraîner localement avec peu de risque, SDXL reste recommandé.

3. Peut-on utiliser FLUX.1 dev commercialement ?

Non. La licence de FLUX.1 dev interdit explicitement l’usage commercial. Seul schnell (Apache 2.0) est relativement souple pour le commercial, ou bien l’API pro payante. N’utilisez pas les poids dev dans un projet commercial.

4. Pourquoi ComfyUI ne lit-il pas le modèle alors qu’il est dans le dossier ?

Causes fréquentes :

Alibaba Cloud - Choix n°1 des développeurs, 15 % de réduction exclusive sur Lighthouse

Obtenir -15 % →Pub

• Le fichier est dans le mauvais répertoire, par exemple dans checkpoints/ alors que le modèle demande unet/.
• Le workflow ne correspond pas, par exemple un workflow SDXL utilisé pour FLUX.
• Des fichiers supplémentaires manquent, comme text encoder ou VAE.
• Le nom de fichier ou le format du chemin est incorrect.

Consultez la partie dépannage des chemins dans le guide de réutilisation des workflows ComfyUI.

5. Quel élément est le modèle de base : checkpoint, LoRA, VAE ou ControlNet ?

Le checkpoint, par exemple un fichier .safetensors, est le modèle de base et contient le réseau de génération complet. LoRA est un fichier de fine-tuning qui s’utilise avec un checkpoint. VAE sert à décoder les images ; certains checkpoints l’intègrent, d’autres nécessitent un VAE séparé. ControlNet est un réseau de contrôle pour piloter précisément la composition, les contours, les poses, etc.

Si vous ne téléchargez qu’un seul fichier, c’est généralement le checkpoint.

6. Puis-je utiliser commercialement un checkpoint trouvé dans le pack de quelqu’un d’autre ?

Pas par défaut. La licence des checkpoints communautaires doit être vérifiée modèle par modèle. La licence du modèle de base ne se transmet pas automatiquement aux dérivés. Si aucune licence claire n’est disponible, considérez-le comme non commercialisable.

7. Un modèle plus récent signifie-t-il toujours de meilleures images ?

Pas forcément. Les nouveaux modèles peuvent améliorer la qualité d’image, la compréhension du texte et la composition, mais :

• Ils demandent plus de matériel, et les machines à faible VRAM peuvent ne pas les faire tourner.
• Leur écosystème est moins mûr, avec moins de workflows et de tutoriels.
• Leur licence peut être plus stricte, ce qui augmente le risque commercial.

Le gain de qualité n’a de sens que si vous pouvez faire tourner le modèle, disposer d’un workflow adapté et comprendre la limite de licence.

Lectures complémentaires et prochaines étapes

Le choix du modèle est la première étape dans l’utilisation de Stable Diffusion. Viennent ensuite l’installation, les workflows et les techniques de prompt.

À lire d’abord :

• Guide ComfyUI débutant : de l’installation à votre première image Stable Diffusion — installation, répertoires de modèles et opérations de base.
• Guide de réutilisation des workflows ComfyUI : import JSON, nodes manquants et chemins de modèles — import de workflow et dépannage.

Pour aller plus loin :

• Prompt Engineering en pratique commerciale — techniques de prompt générales, utiles aussi pour Stable Diffusion.
• Créer à travers les médias : Nano Banana et Gemini — exemples de combinaison d’outils IA.

Sujets à venir :
Les modèles de prompt Stable Diffusion et les guides d’entraînement LoRA seront traités dans des articles séparés.

Références

Les pages officielles suivantes sont les sources de référence pour le choix des modèles et la vérification des licences :

• Introducing Stable Diffusion 3.5 — page officielle d’annonce de la série SD 3.5
• Stability AI License — Stability AI Community License et limites de licence entreprise
• Stable Diffusion 3.5 Large model card — carte du modèle SD 3.5 Large
• Stable Diffusion XL Base 1.0 model card — carte du modèle SDXL base
• black-forest-labs/flux — dépôt officiel d’inférence FLUX.1
• FLUX models by Black Forest Labs — page officielle des modèles FLUX.1
• FLUX.1 dev license — fichier de licence non commerciale de FLUX.1 dev
• FLUX.1 schnell license — fichier de licence Apache 2.0 de FLUX.1 schnell
• ComfyUI Models — répertoires et types de modèles dans ComfyUI