ComfyUI의 'Grok: 참조에서 비디오로' 워크플로는 정적인 참조 이미지를 동적인 비디오 콘텐츠로 변환하도록 설계되었습니다. 이 워크플로는 Grok API를 활용해, 최대 6장의 참조 이미지를 사용하더라도 프레임 전반에서 높은 시각적 일관성을 유지하는 비디오를 생성합니다. 과정은 'LoadImage' 노드에서 참조 이미지를 업로드하는 것으로 시작합니다. 이후 이 이미지는 'GrokVideoReferenceNode'에서 처리되며, 해당 노드는 Grok 모델을 사용해 정적 비주얼을 해석하고 일관된 비디오 시퀀스로 변환합니다. 마지막으로 'SaveVideo' 노드에서 생성된 비디오를 내보내 다양한 용도로 활용할 수 있습니다.
이 워크플로의 차별점은 여러 참조 이미지를 처리해 결과 비디오의 스타일과 캐릭터 묘사를 일관되게 유지한다는 점입니다. 이는 캐릭터 애니메이션이나 비디오 프레임 전반에 걸친 일관된 아트 스타일이 필요한 프로젝트에 특히 유용합니다. Grok 모델의 고급 기능은 입력 이미지를 세밀하게 해석할 수 있어, 정적인 아트를 몰입도 있는 비디오 콘텐츠로 전환하려는 크리에이터에게 유용한 도구입니다.
API
코드에서 이 워크플로우 사용하기
모든 Comfy 워크플로우는 JSON 그래프입니다. 아래 페이로드는 이 워크플로우 그 자체로, ComfyUI에서 실행되는 것과 동일합니다 — URL에서 가져오거나, 버전 관리에 보관하거나, ComfyUI에서 불러와 노드별로 실행할 수 있습니다.
Comfy SDK로 TypeScript 또는 Python에서 실행하세요. 동일한 코드는 Comfy Cloud 또는 직접 호스팅하는 ComfyUI 모두에 적용됩니다 — 기본 URL만 다릅니다.
// Install (beta)
npm i @comfyorg/sdk
// Run "Grok: 레퍼런스 기반 비디오 생성" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_grok_reference_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("6", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("4")[0].toFile("output.png"); // SaveVideoSDK는 API 형식의 워크플로우를 사용합니다: 이 워크플로우를 ComfyUI에서 열고 파일 → 워크플로우 내보내기(API)를 사용하세요.
FAQ
