Le workflow « Grok : Référence vers vidéo » dans ComfyUI est conçu pour transformer des images de référence statiques en contenu vidéo dynamique. Ce workflow exploite l'API Grok pour créer des vidéos qui maintiennent une forte cohérence visuelle entre les images, même avec jusqu'à six images de référence. Le processus commence avec le nœud 'LoadImage', où vous pouvez télécharger vos images de référence. Ces images sont ensuite traitées par le 'GrokVideoReferenceNode', qui utilise le modèle Grok pour interpréter et transformer les visuels statiques en une séquence vidéo cohérente. Enfin, le nœud 'SaveVideo' permet d'exporter la vidéo générée pour divers usages.
Ce qui distingue ce workflow est sa capacité à gérer plusieurs images de référence, assurant que la vidéo résultante conserve un style et une représentation de personnage cohérents. C'est particulièrement utile pour les projets nécessitant de l'animation de personnage ou un style artistique constant sur toute la vidéo. Les capacités avancées du modèle Grok permettent une interprétation nuancée des images d'entrée, faisant de ce workflow un outil puissant pour transformer de l'art statique en contenu vidéo engageant.
API
Utiliser ce workflow depuis le code
Chaque workflow Comfy est un graphe JSON. Le contenu ci-dessous est ce workflow, exactement comme ComfyUI l’exécute — récupérez-le depuis l’URL, gardez-le dans le contrôle de version, ou chargez-le dans ComfyUI et exécutez-le nœud par nœud.
Exécutez-le depuis TypeScript ou Python avec le Comfy SDK. Le même code cible Comfy Cloud ou un ComfyUI auto-hébergé — seule l’URL de base change.
// Install (beta)
npm i @comfyorg/sdk
// Run "Grok: génération vidéo à partir de références" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_grok_reference_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("6", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("4")[0].toFile("output.png"); // SaveVideoLe SDK prend un workflow au format API : ouvrez ce workflow dans ComfyUI et utilisez Fichier → Exporter le workflow (API).
L’accès à l’API Comfy Cloud nécessite un forfait avec clé API.
FAQ
