O workflow HuMo Video Generation foi desenvolvido para criar vídeos de alta qualidade que sincronizam o movimento labial de um personagem com o áudio de entrada. Este workflow utiliza o modelo HuMo, especialmente adaptado para geração de vídeo centrada em humanos. Ao integrar várias modalidades de entrada—texto, imagens e áudio—ele permite uma saída de vídeo rica e personalizável. O núcleo do workflow inclui nós como CLIPTextEncode para processamento de texto, LoadImage para imagens de referência e AudioEncoderEncode para entrada de áudio. Estes são combinados com nós específicos de vídeo como CreateVideo e SaveVideo para produzir o resultado final. O nó WanHuMoImageToVideo é especialmente importante, pois faz a ponte entre imagens estáticas e geração dinâmica de vídeo, garantindo que o movimento labial do personagem esteja alinhado com a trilha de áudio. Este workflow é ideal para criar conteúdo de vídeo envolvente onde sincronização labial precisa e personalização visual são necessárias.
API
Use este workflow a partir do código
Todo workflow Comfy é um grafo JSON. O payload abaixo é este workflow, exatamente como o ComfyUI executa — obtenha-o pela URL, mantenha-o no controle de versão ou carregue-o no ComfyUI e execute nó por nó.
Execute a partir de TypeScript ou Python com o Comfy SDK. O mesmo código serve para o Comfy Cloud ou um ComfyUI hospedado por você — apenas a URL base muda.
// Install (beta)
npm i @comfyorg/sdk
// Run "Geração de Vídeo HuMo" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("video_humo_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("49", "image", asset); // LoadImage
wf.setInput("6", "text", "A young boy in sci-fi style clothing is talking to the camera in an alien desert."); // CLIPTextEncode
const job = await client.run(wf);
await job.getOutputs("59")[0].toFile("output.png"); // SaveVideoO SDK utiliza um workflow no formato API: abra este workflow no ComfyUI e use Arquivo → Exportar Workflow (API).
O acesso à API do Comfy Cloud requer um plano com chave de API.
FAQ
