Рабочий процесс «Kling 3.0: Управление движением» предназначен для интеграции изображений персонажей с референсными видео движения, чтобы генерировать новый динамичный видеоконтент. Используя модель Kling 3.0, этот рабочий процесс позволяет загрузить статичное изображение персонажа и референсное видео движения, а затем синтезирует новое видео, в котором персонаж повторяет действия из референса. Процесс усиливается нодой KlingMotionControl, которая обеспечивает стабильность черт лица персонажа на протяжении всего видео, даже при сложных движениях. Это особенно полезно для задач, где важна высокая точность мимики и движений, например для анимации и разработки игр. В рабочий процесс также включена опциональная привязка элементов, которую можно использовать для дополнительной настройки взаимодействия персонажа с окружением или другими элементами в видео.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "Kling 3.0: Управление движением" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_kling_motion_control3_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("2", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("4")[0].toFile("output.png"); // SaveVideoSDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
