Este tutorial do ComfyUI permite editar um vídeo de entrada usando instruções em linguagem natural com o nó GeminiVideoOmni. O grafo é direto: LoadVideo carrega o clipe, o subgrafo Prompt Constructor (id 331103d2-d660-4a88-abf0-1117dc46b2df) constrói um prompt bem formatado com duração e proporção, GeminiVideoOmni envia o vídeo e o prompt para a API Gemini Omni Flash, e os resultados são exibidos com PreviewAny e salvos com SaveVideo. Um MarkdownNote no canvas traz dicas rápidas.
Tecnicamente, LoadVideo decodifica quadros e metadados, depois o Prompt Constructor concatena sua edição em linguagem natural com configurações explícitas como "duration: 5s" e "aspect ratio: 9:16". O GeminiVideoOmni usa essas informações para guiar o modelo: a proporção define o canvas de saída e a duração limita o tempo do clipe. O modelo retorna um clipe editado conforme suas instruções (ex: troca de fundo, ajustes de clima/atmosfera, reenquadramento), que pode ser rapidamente revisado no PreviewAny e exportado via SaveVideo. Para melhores resultados, mantenha prompts concretos, sempre inclua duração e proporção, e itere em passes curtos.
API
Use este workflow a partir do código
Todo workflow Comfy é um grafo JSON. O payload abaixo é este workflow, exatamente como o ComfyUI executa — obtenha-o pela URL, mantenha-o no controle de versão ou carregue-o no ComfyUI e execute nó por nó.
Execute a partir de TypeScript ou Python com o Comfy SDK. O mesmo código serve para o Comfy Cloud ou um ComfyUI hospedado por você — apenas a URL base muda.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");O SDK utiliza um workflow no formato API: abra este workflow no ComfyUI e use Arquivo → Exportar Workflow (API).
O acesso à API do Comfy Cloud requer um plano com chave de API.
FAQ
