Gemini Omni Flash: Imagem para Vídeo
Gere um vídeo a partir de duas imagens usando Gemini Omni Flash, que interpreta prompts em linguagem natural para controlar duração e proporção. O fluxo aceita 2 imagens de entrada e produz 1 vídeo. Ideal para criar clipes curtos de marca, conteúdo dinâmico para redes sociais e edições iterativas de vídeo via prompt conversacional.
Experimente um exemplo
Sobre este fluxo de trabalho
Este fluxo de trabalho do ComfyUI transforma duas imagens estáticas em um vídeo curto usando o Gemini Omni Flash do Google via o nó GeminiVideoOmni. Você fornece uma imagem inicial e uma final (dois nós LoadImage), depois orienta o movimento, duração e enquadramento com um prompt em linguagem natural. Um subgrafo Prompt Constructor (nó customizado: b83478ba-1f3e-4e62-9869-c8a0c8e9a5f5) ajuda a incluir explicitamente a duração e proporção obrigatórias na string final do prompt—ambos são obrigatórios para o Gemini Omni Video. O nó GeminiVideoOmni então gera um único clipe de vídeo que pode ser visualizado com PreviewAny e exportado com SaveVideo.
Tecnicamente, o fluxo conecta os tensores das duas imagens e o prompt construído ao GeminiVideoOmni, que solicita um vídeo ao modelo Gemini Omni Flash. Duração e proporção são extraídas do prompt (por exemplo: "duration: 4s, aspect_ratio: 16:9"), enquanto o restante do texto descreve o movimento (ex: zoom, pan, morph, reveal). Os nós MarkdownNote no grafo fornecem lembretes e dicas rápidas durante o uso. O resultado é uma forma rápida e conversacional de iterar clipes de marca curtos, posts verticais e reveals antes/depois—sem keyframing manual.
Perguntas e respostas
O Gemini Omni Video exige ambos especificados no prompt. Use o subgrafo Prompt Constructor para inseri-los, ex: "duration: 4s, aspect_ratio: 16:9" seguido da descrição do movimento.
Sim—este fluxo foi projetado para duas entradas: o primeiro LoadImage é o quadro inicial e o segundo é o final. Para movimento sutil a partir de uma única imagem, use a mesma imagem em ambas as entradas.
Se o seu nó/extensão GeminiVideoOmni exigir credenciais, configure uma chave de API Gemini válida nas configurações do nó ou ambiente conforme a documentação da extensão ComfyUI instalada.
A geração de vídeo do Gemini retorna um clipe sem áudio. Use um editor de vídeo para adicionar música ou efeitos sonoros após exportar do SaveVideo.