ComfyUI의 Kling2.6: Animate Images with Audio 워크플로는 정지 이미지를 대화, 노래, 사운드 효과, 앰비언트 오디오 같은 오디오 요소와 동기화된 동적 비디오로 변환하도록 설계되었습니다. 이 워크플로는 이미지에서 비디오로 변환에 강한 Kling 2.6 모델을 활용해, 시각 요소와 오디오 요소가 자연스럽게 통합되도록 합니다. 워크플로의 핵심에는 KlingImageToVideoWithAudio 노드가 있으며, 정지 이미지를 입력으로 받아 지정한 움직임 및 오디오 요소를 적용해 일관된 비디오 출력을 생성합니다. 이어서 SaveVideo 노드를 통해 생성된 애니메이션 결과를 다양한 용도로 쉽게 내보낼 수 있습니다.
기술적으로는 LoadImage 노드로 정지 이미지를 먼저 로딩합니다. 이후 사용자는 장면 설명, 대상 설명, 움직임, 오디오 요소를 포함하는 구조화된 프롬프트 형식으로 장면을 정의할 수 있습니다. KlingImageToVideoWithAudio 노드가 이러한 입력을 처리해 이미지를 애니메이트하고 오디오와 동기화해 자연스러운 비디오를 만듭니다. 이 워크플로는 전문적인 비디오 편집 지식 없이도 프로젝트에 동적 요소를 추가하려는 크리에이터에게 유용하며, 초보자와 숙련 사용자 모두에게 적합합니다.
API
코드에서 이 워크플로우 사용하기
모든 Comfy 워크플로우는 JSON 그래프입니다. 아래 페이로드는 이 워크플로우 그 자체로, ComfyUI에서 실행되는 것과 동일합니다 — URL에서 가져오거나, 버전 관리에 보관하거나, ComfyUI에서 불러와 노드별로 실행할 수 있습니다.
Comfy SDK로 TypeScript 또는 Python에서 실행하세요. 동일한 코드는 Comfy Cloud 또는 직접 호스팅하는 ComfyUI 모두에 적용됩니다 — 기본 URL만 다릅니다.
// Install (beta)
npm i @comfyorg/sdk
// Run "Kling2.6: 오디오와 함께 이미지를 동영상으로" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_kling2_6_i2v_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("14", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("10")[0].toFile("output.png"); // SaveVideoSDK는 API 형식의 워크플로우를 사용합니다: 이 워크플로우를 ComfyUI에서 열고 파일 → 워크플로우 내보내기(API)를 사용하세요.
FAQ
