Ce workflow tutoriel ComfyUI permet d’éditer une vidéo source à l’aide d’instructions en langage naturel grâce au nœud GeminiVideoOmni. Le graphe est simple : LoadVideo importe votre clip, le sous-graphe Prompt Constructor (id 331103d2-d660-4a88-abf0-1117dc46b2df) construit un prompt complet avec durée et format, GeminiVideoOmni envoie la vidéo et le prompt à l’API Gemini Omni Flash, et les résultats sont affichés avec PreviewAny puis sauvegardés avec SaveVideo. Un MarkdownNote sur le canevas donne des astuces rapides.
Techniquement, LoadVideo décode les images et métadonnées, puis le Prompt Constructor concatène votre instruction d’édition avec des réglages explicites comme « duration: 5s » et « aspect ratio: 9:16 ». GeminiVideoOmni utilise ces paramètres pour guider le modèle : le format détermine la taille de sortie, la durée limite la longueur du clip. Le modèle retourne un clip édité conforme à vos instructions (ex : changement de fond, ajustement d’ambiance, recadrage), que vous pouvez prévisualiser dans PreviewAny et exporter via SaveVideo. Pour de meilleurs résultats, gardez les prompts concrets, incluez toujours durée et format, et itérez par petites passes.
API
Utiliser ce workflow depuis le code
Chaque workflow Comfy est un graphe JSON. Le contenu ci-dessous est ce workflow, exactement comme ComfyUI l’exécute — récupérez-le depuis l’URL, gardez-le dans le contrôle de version, ou chargez-le dans ComfyUI et exécutez-le nœud par nœud.
Exécutez-le depuis TypeScript ou Python avec le Comfy SDK. Le même code cible Comfy Cloud ou un ComfyUI auto-hébergé — seule l’URL de base change.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");Le SDK prend un workflow au format API : ouvrez ce workflow dans ComfyUI et utilisez Fichier → Exporter le workflow (API).
L’accès à l’API Comfy Cloud nécessite un forfait avec clé API.
FAQ
