.ai

les meilleurs modèles d'IA open source

Rechercher

ControlNet expliqué : pose, profondeur, contours et images de référence pour SD 1.5, SDXL et Flux

Q: Résultat tracé et plat

Force à 1.0 avec pourcentage de fin à 1.0. Force 0.7, fin 0.7 ; laisse le modèle finir seul.

Q: Le squelette manque des mains ou un membre

Le préprocesseur a mal détecté sur une photo encombrée. Utilise DWPose avec mains activées, recadre la source, ou modifie le squelette dans un nœud éditeur OpenPose.

Q: Manque de mémoire avec deux unités

Chaque ControlNet fait jusqu’à 2.5 Go. Utilise un modèle Union pour les deux types, ou des ControlNets fp8 ; vois le guide VRAM.

Sujet : Prompting

Par Captain

Publié le 2026-02-18

Comment ControlNet fait en sorte qu’un modèle suive une pose, une carte de profondeur, un dessin de contours ou un gribouillis au lieu de deviner la composition à partir du prompt : les types de contrôle courants et quand les utiliser, l’étape de prétraitement, les réglages de force et de pourcentage de fin, les fichiers spécifiques à chaque famille, et les alternatives de l’ère Flux (Flux Depth, Canny, Kontext).

Aperçu

Un prompt dit quoi dessiner ; ControlNet dit où. C’est un réseau secondaire, entraîné par famille, qui lit une image de contrôle (une pose en bâtonnets, une carte de profondeur, un dessin de contours, un gribouillis, une carte de segmentation) et guide le débruiteur pour que le résultat corresponde à cette structure. Le prompt décide toujours du sujet, du style et de la lumière ; l’image de contrôle fixe la composition. C’est comme ça que les gens obtiennent la même pose sur dix personnages, transforment un rendu 3D en photo, ou gardent la forme exacte d’un produit.

Deux étapes se passent toujours. D’abord un préprocesseur transforme ta photo source en image de contrôle (OpenPose dessine le squelette, MiDaS ou Depth Anything estiment la profondeur, Canny trouve les contours, Lineart trace les lignes). Ensuite le modèle ControlNet de ta famille utilise cette image pendant la génération. Donner la photo brute au lieu de la carte prétraitée est la première erreur des débutants ; la deuxième est d’utiliser un ControlNet

sur un

et les modèles 2025 ont changé la donne : Black Forest Labs propose Flux Depth et Flux Canny comme modèles complets et

LoRA

, les Union ControlNets couvrent plusieurs types dans un seul fichier pour SDXL et Flux, et les éditeurs d’instructions (

Qwen Image

Edit, Kontext) gèrent beaucoup de tâches « garder ça, changer ça » sans image de contrôle. Le catalogue sur ce site classe les ControlNets sous « autres » avec leur famille ; la page du modèle précise le type de contrôle.

Référence

Nom	Type	Rôle
OpenPose	control type	Points clés du corps, des mains et du visage sous forme de bâtonnets. Transfert de pose, chorégraphie, personnages cohérents. Faible sur les mains sauf si le modèle main est activé.
Depth (MiDaS, Zoe, Depth Anything)	control type	Carte de profondeur en gris. Garde la disposition spatiale et la caméra tout en permettant un relooking complet. Le contrôle le plus indulgent pour passer de photo à illustration.
Canny / Lineart / SoftEdge (HED)	control type	Dessins de contours. Canny est strict et net, Lineart pour les dessins, SoftEdge plus lâche. Formes de produits, architecture, logos.
Scribble	control type	Traits grossiers que tu dessines toi-même deviennent une composition. Faible force (0.5-0.7) sinon le résultat ressemble au gribouillis.
Tile	control type	Guide un passage d’agrandissement ou de détail pour rester fidèle à l’entrée basse résolution. Le moteur derrière la plupart des workflows « agrandissement ultime ».
IP-Adapter / Redux / reference	image conditioning	Pas un ControlNet : conditionne sur le style ou le visage d’une image plutôt que sur sa structure. Combine avec un ControlNet pour avoir les deux.
Strength / weight	0.4-1.0	À quel point la structure est imposée. 0.8 pour pose et profondeur, 0.5-0.7 pour contours et gribouillis.
Start / end percent	0.0-1.0	À quelle partie du débruitage le contrôle s’applique. Finir à 0.6-0.8 laisse le modèle finir les détails librement et enlève l’aspect « tracé ».
Family files	SD 1.5: lllyasviel control_v11 \| SDXL: diffusers / xinsir Union \| Flux: Flux Depth/Canny, Shakker Union, InstantX	Chaque famille a besoin de son propre ControlNet ; tailles 0.7-2.5 Go. Les fichiers Union regroupent plusieurs types.

Contrôle de pose et profondeur dans le navigateur

BitVector Prism inclut le contrôle de pose et de profondeur pour ses modèles SDXL et Flux : télécharge une référence, choisis le contrôle, tape le prompt. Pas besoin d’installer des préprocesseurs.

Essayer BitVector

Pas à pas

Choisis le type de contrôle selon le boulot : pose pour les gens, profondeur pour les scènes et le relooking, Canny ou Lineart pour les formes dures, gribouillis pour les idées, tile pour l’agrandissement.
Télécharge le ControlNet pour la famille de ton checkpoint dans models/controlnet (
ComfyUI
) ou models/ControlNet (A1111,
Forge
). Les fichiers Union économisent de la place si tu utilises plusieurs types.
Charge ton image source et lance le préprocesseur correspondant (ComfyUI : les nœuds controlnet_aux ; A1111 : l’extension ControlNet le fait en ligne). Prévisualise l’image de contrôle ; corrige-la si le squelette a raté un membre.
ComfyUI : applique ControlNet (Advanced) entre CLIP Text Encode et KSampler, branche l’image de contrôle et le modèle ControlNet, force 0.8, début 0, fin 0.8.
A1111 / Forge : active l’unité ControlNet 0, choisis le préprocesseur et le modèle du même type, poids 0.8, étape de fin 0.8, pixel perfect activé.
Écris le prompt pour ce que tu veux voir, pas pour la pose (la pose est gérée). Génère quatre seeds.
Baisse la force ou le pourcentage de fin si l’image semble tracée ou plate ; augmente-les si la structure dérive. Ajoute une deuxième unité (pose + profondeur) pour les compositions tenaces.
Sur le cloud,
PirateDiffusion
applique ControlNet quand tu réponds à une image source avec /render et un flag de contrôle ;
BitVector
propose pose et profondeur dans ses outils d’image.

Exemples

Transfert de pose dans ComfyUI (SDXL)

Load Image (reference photo) -> DWPose Estimator (body + hands) -> Apply ControlNet Advanced (xinsir controlnet-union-sdxl, type openpose, strength 0.8, end 0.75) -> KSampler

Prompt: a knight in weathered plate armour standing on a cliff at dawn, cinematic, 35mm

Photo vers aquarelle avec profondeur (A1111 / Forge)

ControlNet unit 0: preprocessor depth_anything, model control_sdxl_depth, weight 0.7, end 0.7, pixel perfect

Prompt: loose watercolour illustration of a harbour town, paper texture, soft morning light

Flux Canny LoRA

Load Diffusion Model (flux1-dev-fp8) -> LoraLoaderModelOnly (flux1-canny-dev-lora, 0.85) -> InstructPixToPixConditioning (canny image) -> KSampler (guidance 30)

Astuces

La profondeur est meilleure que Canny pour passer de photo à illustration parce qu’elle laisse la texture libre ; Canny est meilleure que la profondeur pour les logos et produits parce qu’elle garde les contours précis.
Le pourcentage de fin est le réglage que la plupart des gens ne touchent jamais et qui corrige l’aspect plastique, tracé.
Redimensionne l’image de contrôle à la taille de génération avec le même ratio ; des formes décalées coupent le squelette.
OpenPose à partir d’une photo de toi est la façon la plus rapide d’avoir une bibliothèque de poses cohérente pour un personnage.
Pour Flux, les LoRA Depth et Canny de Black Forest Labs sont plus légères que les modèles complets de contrôle et assez bonnes pour la plupart des tâches.
Les éditeurs d’instructions (Qwen Image Edit, Kontext) remplacent souvent un passage ControlNet pour des modifications « même scène, sujet différent » ; vois le guide Qwen Image Edit.

Dépannage

ControlNet ne fait rien

Pourquoi cela arrive

Incompatibilité de famille (ControlNet SD 1.5 sur SDXL), ou la photo brute a été utilisée au lieu de la carte prétraitée.

Comment le corriger

Prends la bonne famille ; lance le préprocesseur et vérifie sa sortie.

Résultat tracé et plat

Pourquoi cela arrive

Force à 1.0 avec pourcentage de fin à 1.0.

Comment le corriger

Force 0.7, fin 0.7 ; laisse le modèle finir seul.

Le squelette manque des mains ou un membre

Pourquoi cela arrive

Le préprocesseur a mal détecté sur une photo encombrée.

Comment le corriger

Utilise DWPose avec mains activées, recadre la source, ou modifie le squelette dans un nœud éditeur OpenPose.

Manque de mémoire avec deux unités

Pourquoi cela arrive

Chaque ControlNet fait jusqu’à 2.5 Go.

Comment le corriger

Utilise un modèle Union pour les deux types, ou des ControlNets fp8 ; vois le guide

VRAM

ControlNet Flux génère du bruit

Pourquoi cela arrive

Mauvais nœud de conditionnement ou

CFG

au-dessus de 1 sur un modèle distillé par guidance.

Comment le corriger

Utilise le nœud indiqué sur la page du modèle et CFG 1 avec guidance selon la page.

ControlNet en répondant à une photo

Sur PirateDiffusion tu réponds à n’importe quelle image dans Telegram avec /render et un flag de contrôle, et le bon ControlNet est appliqué côté serveur. Rendus illimités à prix fixe.

Essayer PirateDiffusion

Questions

ControlNet est-il une LoRA ?

Non. C’est un réseau séparé qui lit une image ; une LoRA modifie les poids du modèle à partir du texte. Les LoRA Depth et Canny de Flux sont une exception : des modèles de contrôle livrés sous forme de LoRA.

Puis-je utiliser ControlNet avec la vidéo ?

Oui :

Wan

VACE et les Wan Fun ControlNets prennent des séquences de pose ou de profondeur ; les guides vidéo sur ce site les couvrent.

Faut-il installer les modèles préprocesseurs ?

Oui, ils se téléchargent à la première utilisation (controlnet_aux dans ComfyUI, l’extension dans A1111). Ils sont petits.

Lequel est mieux, IP-Adapter ou ControlNet ?

Pour des tâches différentes : IP-Adapter copie le look ou l’identité d’une image, ControlNet copie la structure. Beaucoup de workflows utilisent les deux.