Этот обучающий рабочий процесс ComfyUI показывает, как превратить статичное изображение (или пару старт/финиш изображений) и аудиодорожку в связное видео со звуком с помощью Wan2.7. В основе — нода Wan2ImageToVideoApi, которая принимает референсное изображение(я) и аудио, затем синтезирует промежуточные кадры, чтобы видео начиналось с первого кадра, естественно переходило и завершалось на последнем. Ноды LoadImage подают первый и последний контрольные кадры, а SaveVideo записывает финальный результат на диск.
Технически первый и последний кадры работают как сильные композиционные якоря: Wan2.7 сохраняет субъект и компоновку на этих концах и генерирует движение между ними. Предоставленное аудио используется для выравнивания тайминга и темпа, чтобы длительность видео соответствовала треку, а движение развивалось синхронно. Держите стартовое и конечное изображения в одном соотношении сторон и с похожим кадрированием объекта для более чистых переходов. Нода SaveVideo упаковывает сгенерированные кадры (и синхронизированное аудио из API) в воспроизводимый видеофайл.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "Wan2.7: изображение в видео" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_wan2_7_i2v_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("24", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("32")[0].toFile("output.png"); // SaveVideoSDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
