Gemini Omni Flash: изображение в видео
Сгенерируйте видео из двух изображений с помощью Gemini Omni Flash, который интерпретирует промпты на естественном языке для управления длительностью и соотношением сторон. Рабочий процесс принимает 2 входных изображения и выдаёт 1 выходное видео. Подходит для коротких бренд‑клипов, динамичного контента для социальных сетей и итеративных правок видео через диалоговые промпты.
Попробовать пример
Об этом рабочем процессе
Этот ComfyUI Рабочий процесс превращает два статичных изображения в короткое видео с помощью Google Gemini Omni Flash через ноду GeminiVideoOmni. Вы задаёте стартовое и финальное изображение (две ноды LoadImage), а затем управляете движением, длительностью и кадрированием через промпт на естественном языке. Встроенный subgraph Prompt Constructor (пользовательская нода: b83478ba-1f3e-4e62-9869-c8a0c8e9a5f5) помогает явно включить обязательные параметры — duration и aspect ratio — в итоговую строку промпта; для Gemini Omni Video они обязательны. Затем GeminiVideoOmni генерирует один видеоклип, который можно посмотреть в PreviewAny и экспортировать через SaveVideo.
Технически Рабочий процесс подаёт два тензора изображения и собранный текстовый промпт в GeminiVideoOmni, которая запрашивает видео у модели Gemini Omni Flash. Длительность и соотношение сторон парсятся из промпта (например: "duration: 4s, aspect_ratio: 16:9"), а остальная часть текста описывает движение (например, zoom, pan, morph, reveal). Встроенные в граф ноды MarkdownNote дают быстрые подсказки и напоминания. В результате получается быстрый «разговорный» способ итеративно делать короткие бренд-клипы, вертикальные посты и до/после — без ручной раскадровки по ключевым кадрам.
Вопросы и ответы
Gemini Omni Video требует, чтобы оба параметра были указаны в промпте. Используйте subgraph Prompt Constructor, чтобы подставлять их, например: "duration: 4s, aspect_ratio: 16:9", а затем ваше описание движения.
Да — этот рабочий процесс рассчитан на два входа: первый LoadImage — стартовый кадр, второй — конечный. Для едва заметного движения из одного still можно использовать одно и то же изображение в обоих входах.
Если ваша нода/расширение GeminiVideoOmni требует учётные данные, настройте действующий Google Gemini API-ключ в настройках ноды или в окружении — как описано в документации расширения ComfyUI, которое вы установили.
Генерация видео в Gemini возвращает немой клип. Добавьте музыку или звуковые эффекты после экспорта из SaveVideo в видеоредакторе.