Wan 2.2 5B Fun Control은 짧은 클립을 텍스트, 이미지, 레퍼런스 비디오에서 생성하면서, 컨트롤 신호(특히 Canny 노드를 통한 엣지)를 사용해 모션과 구도를 조정하는 방법을 보여주는 컴팩트한 다중 조건 비디오 디퓨전 워크플로입니다. 그래프의 핵심은 Wan22FunControlToVideo 노드로, (CLIPTextEncode에서 가져온) 프롬프트, 선택적 시작 이미지 또는 비디오(LoadImage, LoadVideo + GetVideoComponents), 컨트롤 맵(Canny)을 융합해 시간적으로 일관된 잠재 데이터 시퀀스를 만듭니다. UNETLoader는 wan2.2_fun_control_5B_bf16.safetensors 디퓨전 모델을 로드하고 VAELoader (wan2.2_vae) 및 CLIPLoader와 페어링합니다. 샘플링은 KSampler이 담당하며, ModelSamplingSD3를 사용해 Wan 2.2의 스케줄러에 맞춥니다. VAEDecode는 잠재 데이터를 프레임으로 변환하고, CreateVideo는 프레임을 클립으로 패킹하며, SaveVideo는 최종 파일을 저장합니다.
기술적으로 워크플로는 Step1 - Load models, Step 2 - Start_image, Step3 - Prompt, Step 3 - Control video and video preprocessing처럼 명확한 그룹으로 구성되어 있습니다. 엣지 가이드는 Canny 노드(낮은/높은 임계값)로 준비한 뒤 Wan22FunControlToVideo로 전달되어 구조와 모션을 고정합니다. PreviewImage로 중간 프레임을 미리본 다음 CreateVideo 및 SaveVideo로 결과를 확정할 수 있습니다. Wan 2.2 Fun Control은 깊이 및 포즈 등 여러 조건을 지원하지만, 이 템플릿은 기본값으로 엣지 컨트롤만 연결되어 있습니다. 필요하면 깊이/포즈 노드를 추가하고 출력값을 Wan22FunControlToVideo로 라우팅해 확장할 수 있습니다. 참고: 5B 파라미터 규모인 Wan 2.2 Fun Control은 속도와 접근성을 위해 충실도를 일부 희생합니다. 디테일이 더 부드럽게 나올 수 있으므로, 강한 컨트롤 신호, 단순한 장면, 짧은 클립에서 결과가 더 좋습니다.
API
코드에서 이 워크플로우 사용하기
모든 Comfy 워크플로우는 JSON 그래프입니다. 아래 페이로드는 이 워크플로우 그 자체로, ComfyUI에서 실행되는 것과 동일합니다 — URL에서 가져오거나, 버전 관리에 보관하거나, ComfyUI에서 불러와 노드별로 실행할 수 있습니다.
Comfy SDK로 TypeScript 또는 Python에서 실행하세요. 동일한 코드는 Comfy Cloud 또는 직접 호스팅하는 ComfyUI 모두에 적용됩니다 — 기본 URL만 다릅니다.
// Install (beta)
npm i @comfyorg/sdk
// Run "Wan 2.2 5B Fun 제어" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("video_wan2_2_5B_fun_control_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("70", "image", asset); // LoadImage
wf.setInput("6", "text", "your prompt here"); // CLIPTextEncode
const job = await client.run(wf);
await job.getOutputs("58")[0].toFile("output.png"); // SaveVideoSDK는 API 형식의 워크플로우를 사용합니다: 이 워크플로우를 ComfyUI에서 열고 파일 → 워크플로우 내보내기(API)를 사용하세요.
FAQ
