This ComfyUI tutorial workflow shows how to turn a text prompt or a single still image into a finished MP4 clip using Gemini Omni 1.1 Flash. The core of the pipeline is the GeminiVideoOmniV2 node, which accepts a prompt and (optionally) a reference image to drive image-to-video generation. You can target common aspect ratios and resolutions up to 4K, set clip duration and frame rate, and enable optional audio. The included MarkdownNote provides inline tips, while SaveVideo writes the final video to disk.
Technically, the flow is simple and robust: LoadImage brings in the provided blue_studio_car.png (or your own asset) and feeds it to GeminiVideoOmniV2 when you want image conditioning. The model handles text-to-video and image-to-video, along with internal keyframe interpolation and scene extension, controlled through your prompt and node parameters. GeminiVideoOmniV2 returns the generated clip, and SaveVideo outputs a single MP4 with your chosen fps and path. Leave the image input disconnected for pure text-to-video; connect it to anchor motion, style, and composition to your reference.
API
코드에서 이 워크플로우 사용하기
모든 Comfy 워크플로우는 JSON 그래프입니다. 아래 페이로드는 이 워크플로우 그 자체로, ComfyUI에서 실행되는 것과 동일합니다 — URL에서 가져오거나, 버전 관리에 보관하거나, ComfyUI에서 불러와 노드별로 실행할 수 있습니다.
Comfy SDK로 TypeScript 또는 Python에서 실행하세요. 동일한 코드는 Comfy Cloud 또는 직접 호스팅하는 ComfyUI 모두에 적용됩니다 — 기본 URL만 다릅니다.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");SDK는 API 형식의 워크플로우를 사용합니다: 이 워크플로우를 ComfyUI에서 열고 파일 → 워크플로우 내보내기(API)를 사용하세요.
