이 ComfyUI 워크플로는 GeminiVideoOmni 노드를 통해 Google의 Gemini Omni Flash를 사용하여 두 장의 스틸 이미지를 짧은 비디오로 변환합니다. 시작 이미지와 종료 이미지(LoadImage 노드 2개)를 제공한 뒤, 자연어 프롬프트로 움직임, 재생 시간, 프레이밍을 안내합니다. 내장된 Prompt Constructor 서브그래프(커스텀 노드: b83478ba-1f3e-4e62-9869-c8a0c8e9a5f5)는 최종 프롬프트 문자열에 필수 항목인 재생 시간과 비율을 명시적으로 포함하도록 도와줍니다. 그다음 GeminiVideoOmni 노드가 단일 비디오 클립을 생성하며, PreviewAny로 미리보고 SaveVideo로 내보내기할 수 있습니다.
기술적으로 이 워크플로는 두 이미지 텐서와 구성된 텍스트 프롬프트를 GeminiVideoOmni에 연결해 Gemini Omni Flash 모델에 비디오 생성을 요청합니다. 재생 시간과 비율은 프롬프트에서 파싱되며(예: "duration: 4s, aspect_ratio: 16:9"), 나머지 텍스트는 움직임(예: 줌, 패닝, 모핑, 리빌)을 설명합니다. 그래프에 포함된 MarkdownNote 노드는 작업 중 빠르게 참고할 수 있는 안내와 팁을 제공합니다. 결과적으로 수동 키프레이밍 없이도 짧은 브랜드 클립, 세로형 소셜 게시물, 이전/이후 리빌을 대화형으로 빠르게 반복 제작할 수 있습니다.
API
코드에서 이 워크플로우 사용하기
모든 Comfy 워크플로우는 JSON 그래프입니다. 아래 페이로드는 이 워크플로우 그 자체로, ComfyUI에서 실행되는 것과 동일합니다 — URL에서 가져오거나, 버전 관리에 보관하거나, ComfyUI에서 불러와 노드별로 실행할 수 있습니다.
Comfy SDK로 TypeScript 또는 Python에서 실행하세요. 동일한 코드는 Comfy Cloud 또는 직접 호스팅하는 ComfyUI 모두에 적용됩니다 — 기본 URL만 다릅니다.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");SDK는 API 형식의 워크플로우를 사용합니다: 이 워크플로우를 ComfyUI에서 열고 파일 → 워크플로우 내보내기(API)를 사용하세요.
FAQ
