Этот рабочий процесс ComfyUI превращает одно статичное изображение в аудиореактивное видео, используя модель LTX‑Video 2.3, усиленную Audio‑Reactive LoRA. Вы даёте одно изображение через LoadImage и аудиодорожку через LoadAudio; GeminiNode в группе Create Audio‑Reactive LoRA Prompt помогает сформулировать чистый, описательный текстовый промпт из вашей идеи (и при желании — с учётом контекста изображения). Этот промпт вместе с изображением и аудио поступает в узел генератора видео LTX 2.3 (dacae91a-7342-43be-a654-227b303c33bc), где Audio‑Reactive LoRA модулирует движение и визуальный ритм в ответ на саундтрек. Результат можно просмотреть через PreviewAny и экспортировать через SaveVideo.
Технически рабочий процесс применяет Audio‑Reactive LoRA из https://huggingface.co/100percentrobot/LTX-2.3-Audio-Reactive-LORA во время инференса поверх LTX 2.3. Параметр силы LoRA определяет, насколько сильно аудио‑поведение влияет на видео: используйте 1.0–2.0 в целом, а 1.4+ — для более заметной реактивности. Такой подход удобен для быстрых анимаций «в такт» для постеров, обложек и соцпостов: вы сосредотачиваетесь на коротком промпте и хорошем исходнике, а узел LTX синтезирует кадры и тайминг, и SaveVideo сохраняет готовый клип.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");SDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
