Этот рабочий процесс ComfyUI превращает текстовый промпт в короткое видео, используя checkpoint LTX-0.9.5 для текст-в-видео. Сначала он загружает модель и текстовый энкодер через CheckpointLoaderSimple и CLIPLoader, затем преобразует ваш промпт и опциональный негативный промпт в эмбеддинги через CLIPTextEncode. Эти эмбеддинги адаптируются для видео с помощью LTXVConditioning, чтобы модель могла синтезировать временно согласованное движение по вашему текстовому описанию.
Далее EmptyLTXVLatentVideo задаёт холст клипа — количество кадров, ширину/высоту, FPS и seed — а LTXVScheduler и пользовательский блок сэмплера (SamplerCustom + KSamplerSelect) ведут процесс денойзинга по всем кадрам. После сэмплирования VAEDecode превращает латентные кадры в RGB-изображения. CreateVideo сшивает последовательность кадров в воспроизводимый файл, а SaveVideo записывает его на диск. Рабочий процесс организован в понятные группы (Step1 - Load models, Step2 - Video size, Step3 - Prompt, Custom sampler), поэтому всегда ясно, где менять модели, Разрешение, тайминг и сэмплирование.
Полезность здесь — в контроле на каждом этапе: описательный промптинг (через CLIPTextEncode) для содержимого и движения; точная длительность и аспект (через EmptyLTXVLatentVideo); и предсказуемые результаты с seed и выбором сэмплера (KSamplerSelect). Автор отмечает, что LTX-0.9.5 лучше работает с длинными, подробными промптами — краткие промпты часто дают более слабый результат — поэтому для лучшего качества описывайте субъектов, действия, контекст сцены и движение камеры.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "LTXV Текст в Видео" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("ltxv_text_to_video_api.json");
wf.setInput("6", "text", "your prompt here"); // CLIPTextEncode
const job = await client.run(wf);
await job.getOutputs("79")[0].toFile("output.png"); // SaveVideoSDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
