Этот учебный материал ComfyUI показывает, как генерировать плавные, управляемые видеоклипы, явно контролируя первый и последний кадры с помощью Wan 2.1 FLF2V. Ядро рабочего процесса — нода WanFirstLastFrameToVideo, которая объединяет три источника условия: эмбеддинги промпта из CLIPTextEncode, визуальное направление из CLIPVisionEncode для стартового/финального изображений и Wan 2.1 UNet, загруженную через UNETLoader. Рабочий процесс настроен на выход 720p и 16 кадров (F16), что даёт компактный, визуально согласованный клип с чистым переходом от первого кадра к последнему.
Внутри компоненты модели загружаются в группе «Load Models Here»: VAELoader и VAEDecode выполняют декодирование кадров из латентного в RGB; CLIPLoader и CLIPTextEncode создают эмбеддинги положительного текста и (опционально) негативного промпта; CLIPVisionLoader вместе с CLIPVisionEncode извлекают визуальные признаки из стартового и финального изображений. ModelSamplingSD3 задаёт таймстепы/расписание, которое использует KSampler для diffusion-шагов для Wan 2.1 UNet. Наконец, CreateVideo собирает декодированные кадры, а SaveVideo записывает MP4 на диск. Этот сетап подходит, когда нужен точный контроль движения и композиции — например, под ключевые кадры сториборда — при сохранении текстового управления стилем.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "Wan 2.1 Первый-Последний Кадр Видео 720p F16" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("wan2.1_flf2v_720_f16_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("52", "image", asset); // LoadImage
wf.setInput("6", "text", "glass flower blossom"); // CLIPTextEncode
const job = await client.run(wf);
await job.getOutputs("92")[0].toFile("output.png"); // SaveVideoSDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
