Этот ComfyUI Рабочий процесс превращает два статичных изображения в короткое видео с помощью Google Gemini Omni Flash через ноду GeminiVideoOmni. Вы задаёте стартовое и финальное изображение (две ноды LoadImage), а затем управляете движением, длительностью и кадрированием через промпт на естественном языке. Встроенный subgraph Prompt Constructor (пользовательская нода: b83478ba-1f3e-4e62-9869-c8a0c8e9a5f5) помогает явно включить обязательные параметры — duration и aspect ratio — в итоговую строку промпта; для Gemini Omni Video они обязательны. Затем GeminiVideoOmni генерирует один видеоклип, который можно посмотреть в PreviewAny и экспортировать через SaveVideo.
Технически Рабочий процесс подаёт два тензора изображения и собранный текстовый промпт в GeminiVideoOmni, которая запрашивает видео у модели Gemini Omni Flash. Длительность и соотношение сторон парсятся из промпта (например: "duration: 4s, aspect_ratio: 16:9"), а остальная часть текста описывает движение (например, zoom, pan, morph, reveal). Встроенные в граф ноды MarkdownNote дают быстрые подсказки и напоминания. В результате получается быстрый «разговорный» способ итеративно делать короткие бренд-клипы, вертикальные посты и до/после — без ручной раскадровки по ключевым кадрам.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");SDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
