Model
Trends
.ai
Model
Trends
.ai
die besten Open-Source-KI-Modelle

Load ControlNet Model-Node in ComfyUI

Load ControlNet Model lädt eine ControlNet (oder T2I-Adapter / ControlNet Union) Datei aus models/controlnet und gibt ein CONTROL_NET Objekt für Apply ControlNet aus.
Node-Paket: ComfyUI core
Kategorie: ControlNet und Steuerung

Was Load ControlNet Model macht

ControlNets sind Neben-Netzwerke, die das Diffusionsmodell mit einem Leitbild steuern: eine Kantendarstellung, eine Tiefenkarte, ein Pose-Skelett, eine Normalenkarte oder das Bild selbst (Tile). Load ControlNet Model lädt so eine Datei und muss zur Basis-Modellfamilie passen: SD 1.5 ControlNets für SD 1.5 Checkpoints, SDXL ControlNets (zum Beispiel controlnet-union-sdxl-1.0, diffusers_xl_canny) für SDXL und Pony, Flux ControlNets (Shakker, InstantX, Union Pro) für Flux.
Union- und Promax-Modelle bündeln mehrere Kontrolltypen in einer Datei und wechseln den Modus über einen Begleitknoten (SetUnionControlNetType) oder durch den Preprocessor, den du ihnen gibst. T2I-Adapter werden über denselben Knoten geladen und sind leichter, aber schwächer. Die DiffControlNetLoader-Variante nimmt den MODEL-Eingang für diff-ControlNets, die heute selten sind.

Eingänge

Name
Typ
Bedeutung
control_net_name
COMBO
Eine Datei aus models/controlnet.

Ausgänge

Name
Typ
Bedeutung
CONTROL_NET
CONTROL_NET
Das geladene Netzwerk; verbinde es mit Apply ControlNet.
AD
Spar dir die Einrichtung: ComfyUI-Workflows vorinstalliert in der Cloud
BitVector führt fertige ComfyUI-Workflows auf eigenen GPUs aus. Keine Installation, keine fehlenden Nodes, keine roten Kästen. Auf dem Handy oder Laptop öffnen und in einer Minute generieren.

So verwendest du Load ControlNet Model

  1. Lade ein ControlNet für deine Modellfamilie in models/controlnet herunter.
  2. Füge Load ControlNet Model hinzu und wähle die Datei aus.
  3. Verbinde CONTROL_NET mit Apply ControlNet zusammen mit dem vorverarbeiteten Leitbild.
  4. Für ein Union-Modell füge SetUnionControlNetType hinzu und wähle canny, depth, openpose usw.

Einstellungen und Tipps

  • Dateinamen verraten die Familie: "xl" oder "sdxl" für SDXL, "v11p_sd15" für SD 1.5, "flux" für Flux.
  • fp16-Versionen (700 MB für SD 1.5, 2,5 GB für SDXL) reichen für die Generierung aus.
  • Ein geladenes ControlNet kann in mehreren Apply ControlNet-Knoten mit verschiedenen Bildern verwendet werden.
  • Das ControlNet Aux Pack stellt die Preprocessor (Canny, Depth Anything, DWPose) bereit, die Leitbilder erzeugen.

Fehlerbehebung bei Load ControlNet Model

Fehler: ControlNet Modelltyp stimmt nicht überein / Form stimmt nicht überein

Warum es passiert
Ein SD 1.5 ControlNet mit einem SDXL Checkpoint oder umgekehrt.

So behebst du es
Lade das ControlNet für die richtige Familie herunter und wähle es hier aus.

Das ControlNet zeigt keine sichtbare Wirkung

Warum es passiert
Ein Union-Modell ohne eingestellten Typ, Stärke 0 oder das Leitbild ist schwarz, weil der Preprocessor fehlgeschlagen ist.

So behebst du es
Zeige das Leitbild zur Vorschau an, setze die Stärke auf 0,6-1,0 und füge SetUnionControlNetType für Union-Dateien hinzu.

Dropdown ist leer

Warum es passiert
Keine Dateien in models/controlnet oder Dateien in einem Unterordner mit nicht unterstützter Erweiterung.

So behebst du es
Lege .safetensors- oder .pth-Dateien direkt in models/controlnet ab und drücke R.

AD
Diesen Workflow vom Handy aus starten
Jeder Workflow auf dieser Seite ist auf BitVector vorinstalliert, mit Modellen und Custom Nodes an Ort und Stelle. Einen auswählen, Prompt eingeben, fertig. Null Einrichtung, nichts herunterladen.

Fragen zu Load ControlNet Model

Kann ich einen diffusers ControlNet-Ordner laden?

Nur Einzeldatei-Versionen. Konvertiere oder lade die .safetensors-Version herunter.

Funktionieren ControlNets mit LoRAs?

Ja; ControlNets wirken auf Conditioning, LoRAs patchen das Modell. Sie lassen sich frei kombinieren.

Verwandte Nodes

Apply ControlNet
ComfyUI core
Apply ControlNet hängt ein Leitbild und ein geladenes ControlNet an das positive und negative CONDITIONING an, mit Stärke und Start-/End-Prozentwerten, damit der Sampler Kanten, Tiefe oder Pose vom Leitbild folgt.
Load Checkpoint
ComfyUI core
Load Checkpoint (CheckpointLoaderSimple) öffnet eine .safetensors- oder .ckpt-Modell-Datei und liefert die drei Teile, die jeder Workflow braucht: das Diffusions-MODELL, den CLIP-Textencoder und das VAE.
Load Image
ComfyUI core
Load Image lädt ein Bild aus dem ComfyUI-Eingabeordner (oder einem Upload) und gibt einen IMAGE-Tensor plus eine MASKE aus, die aus dem Alphakanal stammt. Das ist der Startpunkt für img2img, Inpainting, ControlNet und IP-Adapter-Graphen.
Ultimate SD Upscale
ComfyUI_UltimateSDUpscale
Ultimate SD Upscale vergrößert ein Bild mit einem ESRGAN-Modell und sampelt es dann Kachel für Kachel durch das Diffusionsmodell mit deinem Prompt bei niedrigem Denoise neu, um echte Details bei 2x-4x hinzuzufügen, ohne dass der VRAM ausgeht.
AD
Keine Lust mehr, Nodes zu reparieren? Lass es die Cloud machen
BitVector hält hunderte ComfyUI-Workflows installiert, aktuell und getestet auf schnellen Cloud-GPUs. Kein Python, keine CUDA-Fehler, keine VRAM-Grenzen. Läuft in jedem Browser.

Weitere ComfyUI-Nodes

CLIP Text Encode (Prompt)
ComfyUI core
CLIP Text Encode wandelt einen Textprompt mit dem Modell-Textencoder in CONDITIONING um. Ein Node hält den positiven Prompt, ein zweiter den negativen Prompt.
ComfyUI Manager
ComfyUI-Manager
ComfyUI Manager ist die Erweiterung, die benutzerdefinierte Node-Pakete und Modelle direkt in der Oberfläche installiert, aktualisiert und repariert, fehlende Nodes in importierten Workflows erkennt und deine Einrichtung sichert.
KSampler
ComfyUI core
KSampler führt die Denoising-Schleife aus: Es nimmt das Modell, die Prompts und ein Latent und erzeugt das fertige latente Bild, gesteuert durch Seed, Schritte, cfg, Sampler, Scheduler und Denoise.
Save Image
ComfyUI core
Save Image speichert den IMAGE-Tensor als PNG in ComfyUI/output und bettet den gesamten Workflow in die Dateimetadaten ein, sodass das Bild zurück in ComfyUI gezogen werden kann, um den Graph wiederherzustellen.
VAE Decode
ComfyUI core
VAE Decode wandelt den gesampelten LATENT mit dem VAE in ein Pixel-BILD um; VAE Decode (Tiled) macht das Gleiche in Kacheln für sehr große Bilder.
Empty Latent Image
ComfyUI core
Empty Latent Image erstellt die leere latente Leinwand (Breite, Höhe, batch_size), von der das Text-zu-Bild-Sampling startet; die Dimensionen müssen Vielfache von 8 sein und zur Modellfamilie passen.