Wan 2.2 5B Fun Control é um fluxo de difusão de vídeo multi-condição compacto que demonstra como direcionar movimento e composição usando sinais de controle—principalmente bordas via nó Canny—ao gerar clipes curtos a partir de texto, imagens ou vídeo de referência. O núcleo do grafo é o nó Wan22FunControlToVideo, que combina seu prompt (do CLIPTextEncode), imagem ou vídeo inicial opcional (LoadImage, LoadVideo + GetVideoComponents) e mapas de controle (Canny) em uma sequência latente temporalmente coerente. Um UNETLoader carrega o modelo de difusão wan2.2_fun_control_5B_bf16.safetensors e o combina com VAELoader (wan2.2_vae) e CLIPLoader; a amostragem é conduzida por KSampler usando ModelSamplingSD3 para combinar com o scheduler do Wan 2.2. O VAEDecode converte latentes em quadros, CreateVideo empacota os quadros em um clipe e SaveVideo grava o arquivo final.
Tecnicamente, o fluxo está organizado em grupos claros: Step1 - Load models, Step 2 - Start_image, Step3 - Prompt e Step 3 - Control video and video preprocessing. A orientação por bordas é preparada pelo nó Canny (limiares baixo/alto) e passada para o Wan22FunControlToVideo para ancorar estrutura e movimento. Você pode visualizar quadros intermediários com PreviewImage e finalizar o resultado com CreateVideo e SaveVideo. Embora o Wan 2.2 Fun Control suporte múltiplas condições (ex: profundidade e pose), este template conecta apenas o controle por bordas por padrão; é possível estender adicionando nós de profundidade/pose e roteando suas saídas para o Wan22FunControlToVideo. Observação: com apenas 5B parâmetros, o Wan 2.2 Fun Control prioriza velocidade e acessibilidade em detrimento da fidelidade—espere detalhes mais suaves e use sinais de controle fortes, cenas simples e clipes curtos para melhores resultados.
API
Use este workflow a partir do código
Todo workflow Comfy é um grafo JSON. O payload abaixo é este workflow, exatamente como o ComfyUI executa — obtenha-o pela URL, mantenha-o no controle de versão ou carregue-o no ComfyUI e execute nó por nó.
Execute a partir de TypeScript ou Python com o Comfy SDK. O mesmo código serve para o Comfy Cloud ou um ComfyUI hospedado por você — apenas a URL base muda.
// Install (beta)
npm i @comfyorg/sdk
// Run "Wan 2.2 5B Fun Control" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("video_wan2_2_5B_fun_control_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("70", "image", asset); // LoadImage
wf.setInput("6", "text", "your prompt here"); // CLIPTextEncode
const job = await client.run(wf);
await job.getOutputs("58")[0].toFile("output.png"); // SaveVideoO SDK utiliza um workflow no formato API: abra este workflow no ComfyUI e use Arquivo → Exportar Workflow (API).
O acesso à API do Comfy Cloud requer um plano com chave de API.
FAQ
