ComfyUI의 'Change Any Objects' 워크플로는 간단한 텍스트 프롬프트 또는 선택적 참조 이미지를 사용해 비디오 안의 오브젝트를 교체하거나 변경할 수 있도록 설계되었습니다. 이 워크플로는 SAM3 및 Wan2.1 VACE 같은 모델을 활용한 고급 인페인팅 기법으로, 정확한 오브젝트 마스킹과 교체를 수행합니다. 과정은 VHS_LoadVideo 및 WanVideoDecode 같은 노드를 사용해 비디오 입력을 로딩하고 필요한 설정을 구성하는 것에서 시작합니다. SAM3 모델은 비디오 세그먼테이션과 오브젝트 마스킹에서 핵심 역할을 하며, 사용자가 직관적인 프롬프트로 변경할 오브젝트를 지정할 수 있게 합니다. 오브젝트가 식별되면 Wan2.1 VACE 모델이 사용자의 프롬프트 또는 참조 이미지에서 유도된 새로운 콘텐츠로 해당 영역을 인페인팅하여 교체합니다. 이러한 모델 및 노드 조합은 광범위한 수동 편집 없이도 창의적인 변환을 가능하게 하는 비디오 편집 도구를 제공합니다.
API
코드에서 이 워크플로우 사용하기
모든 Comfy 워크플로우는 JSON 그래프입니다. 아래 페이로드는 이 워크플로우 그 자체로, ComfyUI에서 실행되는 것과 동일합니다 — URL에서 가져오거나, 버전 관리에 보관하거나, ComfyUI에서 불러와 노드별로 실행할 수 있습니다.
Comfy SDK로 TypeScript 또는 Python에서 실행하세요. 동일한 코드는 Comfy Cloud 또는 직접 호스팅하는 ComfyUI 모두에 적용됩니다 — 기본 URL만 다릅니다.
// Install (beta)
npm i @comfyorg/sdk
// Run "모든 객체 변경" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("templates_shane_change_any_objects_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("204", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("164")[0].toFile("output.png"); // VHS_VideoCombineSDK는 API 형식의 워크플로우를 사용합니다: 이 워크플로우를 ComfyUI에서 열고 파일 → 워크플로우 내보내기(API)를 사용하세요.
FAQ
