Este flujo de trabajo convierte un par de imágenes en un video corto y coherente aprovechando la difusión de video basada en inpainting de Wan 2.1. Proporcionas un cuadro inicial y uno final; el nodo WanFunInpaintToVideo guía al modelo para sintetizar el movimiento intermedio mientras preserva detalles de sujeto y escena anclados en tus imágenes. Los prompts de texto (vía CLIPTextEncode) dirigen el estilo y contenido, mientras que los prompts negativos ayudan a suprimir artefactos.
A nivel técnico, Step1 carga los componentes principales: UNETLoader (Wan2.1 / Wan), VAELoader/VAEDecode para conversión latente <-> píxel, y CLIPLoader para el condicionamiento de texto. Tus cuadros inicial y final se cargan con LoadImage y se codifican usando CLIPVisionLoader + CLIPVisionEncode para producir el condicionamiento de imagen para el UNet. KSampler dirige el proceso de difusión usando ModelSamplingSD3 para el schedule correcto de sigma, con CFGZeroStar y SkipLayerGuidanceDiT estabilizando la guía. El grupo Attention Booster aplica UNetTemporalAttentionMultiply para reforzar la coherencia temporal entre cuadros. Finalmente, CreateVideo ensambla los cuadros y SaveVideo escribe el clip final.
API
Usa este flujo de trabajo desde código
Cada flujo de trabajo de Comfy es un grafo JSON. El siguiente payload es este flujo de trabajo, exactamente como lo ejecuta ComfyUI: descárgalo desde la URL, guárdalo en control de versiones o cárgalo en ComfyUI y ejecútalo nodo por nodo.
Ejecuta desde TypeScript o Python con el Comfy SDK. El mismo código funciona en Comfy Cloud o en un ComfyUI propio: solo cambia la URL base.
// Install (beta)
npm i @comfyorg/sdk
// Run "Wan 2.1 inpainting" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("wan2.1_fun_inp_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("72", "image", asset); // LoadImage
wf.setInput("6", "text", "your prompt here"); // CLIPTextEncode
const job = await client.run(wf);
await job.getOutputs("80")[0].toFile("output.png"); // SaveVideoEl SDK utiliza un flujo de trabajo en formato API: abre este flujo de trabajo en ComfyUI y usa Archivo → Exportar flujo de trabajo (API).
El acceso a la API de Comfy Cloud requiere un plan con clave API.
Preguntas frecuentes
