O fluxo 'Grok: Referência para Vídeo' no ComfyUI foi criado para transformar imagens estáticas de referência em conteúdo dinâmico de vídeo. Ele utiliza a API Grok para criar vídeos que mantêm alta consistência visual entre os quadros, mesmo usando até seis imagens de referência. O processo começa com o nó 'LoadImage', onde você pode enviar suas imagens de referência. Essas imagens são processadas pelo 'GrokVideoReferenceNode', que utiliza o modelo Grok para interpretar e transformar os visuais estáticos em uma sequência de vídeo coerente. Por fim, o nó 'SaveVideo' permite exportar o vídeo gerado para uso em diversas aplicações.
O diferencial deste fluxo é a capacidade de lidar com múltiplas imagens de referência, garantindo que o vídeo resultante mantenha estilo e caracterização consistentes. Isso é especialmente útil para projetos que exigem animação de personagens ou estilo artístico uniforme entre os quadros. As capacidades avançadas do modelo Grok permitem interpretação detalhada das imagens de entrada, tornando este fluxo uma ferramenta poderosa para criadores que desejam converter arte estática em vídeos envolventes.
API
Use este workflow a partir do código
Todo workflow Comfy é um grafo JSON. O payload abaixo é este workflow, exatamente como o ComfyUI executa — obtenha-o pela URL, mantenha-o no controle de versão ou carregue-o no ComfyUI e execute nó por nó.
Execute a partir de TypeScript ou Python com o Comfy SDK. O mesmo código serve para o Comfy Cloud ou um ComfyUI hospedado por você — apenas a URL base muda.
// Install (beta)
npm i @comfyorg/sdk
// Run "Grok: referência para vídeo" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_grok_reference_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("6", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("4")[0].toFile("output.png"); // SaveVideoO SDK utiliza um workflow no formato API: abra este workflow no ComfyUI e use Arquivo → Exportar Workflow (API).
O acesso à API do Comfy Cloud requer um plano com chave de API.
FAQ
