Этот учебный Рабочий процесс ComfyUI показывает, как генерировать управляемые видео с Wan2.2 Fun Control (14B) под управлением входов позы, глубины и контуров. В основе нода Wan22FunControlToVideo объединяет ваш текстовый промпт из CLIPTextEncode с одним или несколькими потоками управления, полученными из референсного видео. Стек модели загружается через UNETLoader и VAELoader, а CLIPLoader и CLIPTextEncode дают многоязычное текстовое кондиционирование. Сэмплинг идёт через ModelSamplingSD3 с KSamplerAdvanced, чтобы сбалансировать качество, скорость и силу управления. В конце VAEDecode восстанавливает кадры, а SaveVideo экспортирует результат.
Вы можете предобрабатывать управляющие видео прямо в графе: LoadVideo и GetVideoComponents загружают ваш материал, Canny извлекает контуры, а необязательные пользовательские узлы (comfyui_controlnet_aux и ComfyUI-DepthAnythingV2) добавляют карты позы/глубины. CreateVideo задаёт разрешение, число кадров и FPS под режим обучения Wan2.2 (мульти-разрешение 512/768/1024, 81 кадр при 16 FPS). Группа Start_image позволяет закрепить первый кадр через LoadImage для стабильного персонажа/внешнего вида. Необязательный LoraLoaderModelOnly применяет Wan2.2 Lighting LoRA для более быстрых рендеров ценой снижения динамики движения. В итоге вы получаете гибкий, воспроизводимый конвейер для video-to-video генерации с надёжным сохранением структуры и контролем стиля.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "Wan 2.2 14B Fun Управление" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("video_wan2_2_14B_fun_control_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("145", "image", asset); // LoadImage
wf.setInput("179", "text", "your prompt here"); // CLIPTextEncode
const job = await client.run(wf);
await job.getOutputs("170")[0].toFile("output.png"); // SaveVideoSDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
