Этот учебный рабочий процесс ComfyUI превращает одно изображение в короткое видео с озвучкой, с устойчивой визуальной идентичностью и воспринимаемым совпадением движения губ. Он сочетает Lightricks LTX 2.3 для генерации видео с ID-LoRA (CelebVHQ), чтобы лицо и стиль субъекта оставались согласованными от кадра к кадру, а Qwen 3 TTS создаёт соответствующую голосовую дорожку. Пайплайн разделён на понятные группы: Load Image, Create Prompts, Prompt Extraction, Create Voice и Create Video.
Внутри GeminiNode анализирует загруженное изображение (через LoadImage) и набрасывает два взаимодополняющих текста: реплику для речи с подсказками по экспрессии и описание сцены/внешности. Затем RegexExtract парсит их в формат, готовый для ID-LoRA, с тремя размеченными секциями: [VISUAL], [SPEECH] и [SOUNDS]. FB_Qwen3TTSCustomVoice использует [SPEECH] и стилевые подсказки из [SOUNDS], чтобы синтезировать голосовую дорожку, которая сохраняется через SaveAudioMP3. Видеонода LTX 2.3 (пользовательская нода в этом графе) принимает структурированный промпт вместе с референсным изображением и рендерит говорящий ролик, а ID-LoRA CelebVHQ улучшает удержание идентичности в динамичных, «в полевых условиях» сценариях. PreviewAny помогает быстро итератировать, а SaveVideo записывает финальный клип. Локальные пользователи могут опционально загрузить LTX spatial upscaler (ltx-2.3-spatial-upscaler-x2-1.1.safetensors) для более чистых деталей на повышенном разрешении.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");SDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
