Model
Trends
.ai
Model
Trends
.ai
os melhores modelos de IA de código aberto

Nó Load ControlNet Model no ComfyUI

Load ControlNet Model carrega um arquivo ControlNet (ou T2I-Adapter / ControlNet Union) da pasta models/controlnet e gera um objeto CONTROL_NET para usar no Apply ControlNet.
Pacote de nós: ComfyUI core
Categoria: ControlNet e orientação

O que Load ControlNet Model faz

ControlNets são redes auxiliares que guiam o modelo de difusão com uma imagem de referência: um mapa de bordas, mapa de profundidade, esqueleto de pose, mapa normal ou a própria imagem (Tile). Load ControlNet Model carrega um desses arquivos e precisa combinar com a família do modelo base: ControlNets SD 1.5 para checkpoints SD 1.5, ControlNets SDXL (como controlnet-union-sdxl-1.0, diffusers_xl_canny) para SDXL e Pony, ControlNets Flux (Shakker, InstantX, Union Pro) para Flux.
Modelos Union e Promax juntam vários tipos de controle num arquivo só e mudam o modo por um nó acompanhante (SetUnionControlNetType) ou pelo preprocessor que você usar. T2I-Adapters carregam pelo mesmo nó, são mais leves, mas menos potentes. A variante DiffControlNetLoader usa a entrada MODEL para diff-ControlNets, que são raros hoje em dia.

Entradas

Nome
Tipo
O que é
control_net_name
COMBO
Um arquivo da pasta models/controlnet.

Saídas

Nome
Tipo
O que é
CONTROL_NET
CONTROL_NET
A rede carregada; conecte ao Apply ControlNet.
AD
Pule a instalação: workflows do ComfyUI pré-instalados na nuvem
O BitVector executa workflows prontos do ComfyUI em suas próprias GPUs. Sem instalação, sem nós faltando, sem caixas vermelhas. Abra no celular ou no notebook e gere em um minuto.

Como usar Load ControlNet Model

  1. Baixe um ControlNet para a família do seu modelo e coloque em models/controlnet.
  2. Adicione Load ControlNet Model e escolha o arquivo.
  3. Conecte CONTROL_NET ao Apply ControlNet junto com a imagem guia pré-processada.
  4. Para um modelo Union, adicione SetUnionControlNetType e escolha canny, depth, openpose, etc.

Configurações e dicas

  • Os nomes dos arquivos indicam a família: "xl" ou "sdxl" para SDXL, "v11p_sd15" para SD 1.5, "flux" para Flux.
  • Versões fp16 (700 MB para SD 1.5, 2,5 GB para SDXL) já são suficientes para gerar imagens.
  • Um ControlNet carregado pode ser usado em vários Apply ControlNet com imagens diferentes.
  • O pacote ControlNet Aux traz os preprocessadores (Canny, Depth Anything, DWPose) que criam as imagens guia.

Solução de problemas de Load ControlNet Model

Erro: tipo ou formato do modelo ControlNet incompatível

Por que acontece
Um ControlNet SD 1.5 com checkpoint SDXL ou o contrário.

Como corrigir
Baixe o ControlNet da família certa e escolha ele aqui.

O ControlNet não tem efeito visível

Por que acontece
Um modelo Union sem tipo definido, força 0, ou a imagem guia está preta porque o preprocessor falhou.

Como corrigir
Veja a imagem guia, ajuste força para 0.6-1.0 e adicione SetUnionControlNetType para arquivos union.

Dropdown está vazio

Por que acontece
Não tem arquivos em models/controlnet, ou estão em pastas dentro com extensão não suportada.

Como corrigir
Coloque arquivos .safetensors ou .pth direto em models/controlnet e aperte R.

AD
Execute este workflow pelo celular
Todos os workflows desta página já estão pré-instalados no BitVector, com modelos e nós personalizados no lugar. Escolha um, digite um prompt, pronto. Zero configuração, nada para baixar.

Perguntas sobre Load ControlNet Model

Posso carregar uma pasta ControlNet do diffusers?

Só versões com um arquivo só. Converta ou baixe a versão .safetensors.

ControlNets funcionam com LoRAs?

Sim; ControlNets atuam no conditioning, LoRAs modificam o modelo. Eles funcionam juntos numa boa.

Nós relacionados

Apply ControlNet
ComfyUI core
Apply ControlNet conecta uma imagem guia e um ControlNet carregado ao CONDITIONING positivo e negativo com força e porcentagens de início/fim, para que o sampler siga bordas, profundidade ou pose da imagem guia.
Load Checkpoint
ComfyUI core
Load Checkpoint (CheckpointLoaderSimple) abre um arquivo de modelo .safetensors ou .ckpt e entrega as três partes que todo fluxo de trabalho precisa: o MODEL de difusão, o codificador de texto CLIP e o VAE.
Load Image
ComfyUI core
Load Image lê uma imagem da pasta de entrada do ComfyUI (ou um upload) e gera um tensor IMAGE mais uma MASK tirada do canal alfa, o ponto de partida para img2img, inpainting, ControlNet e gráficos IP-Adapter.
Ultimate SD Upscale
ComfyUI_UltimateSDUpscale
Ultimate SD Upscale aumenta uma imagem com um modelo ESRGAN, depois reamostra ela em blocos pelo modelo de difusão com seu prompt em baixo denoise, adicionando detalhes reais em 2x-4x sem estourar a VRAM.
AD
Cansado de consertar nós? Deixe a nuvem fazer isso
O BitVector mantém centenas de workflows do ComfyUI instalados, atualizados e testados em GPUs rápidas na nuvem. Sem Python, sem erros de CUDA, sem limite de VRAM. Funciona em qualquer navegador.

Mais nós do ComfyUI

CLIP Text Encode (Prompt)
ComfyUI core
CLIP Text Encode transforma um prompt de texto em CONDITIONING usando o codificador de texto do modelo. Um nó segura o prompt positivo, e outro nó o prompt negativo.
ComfyUI Manager
ComfyUI-Manager
ComfyUI Manager é a extensão que instala, atualiza e corrige pacotes de nós personalizados e modelos direto pela interface, resolve nós faltando em fluxos importados e salva snapshots da sua configuração.
KSampler
ComfyUI core
KSampler executa o loop de remoção de ruído: ele pega o modelo, os prompts e um latent e produz a imagem latent final, controlada por seed, steps, cfg, sampler, scheduler e denoise.
Save Image
ComfyUI core
Save Image grava o tensor IMAGE em ComfyUI/output como um PNG, com todo o fluxo de trabalho embutido nos metadados do arquivo para que a imagem possa ser arrastada de volta para o ComfyUI e restaurar o gráfico.
VAE Decode
ComfyUI core
VAE Decode converte o LATENT amostrado em uma IMAGE de pixels usando o VAE; VAE Decode (Tiled) faz o mesmo em blocos para imagens muito grandes.
Empty Latent Image
ComfyUI core
Empty Latent Image cria a tela latente em branco (largura, altura, batch_size) de onde a amostragem texto-para-imagem começa; as dimensões precisam ser múltiplos de 8 e combinar com a família do modelo.