Ce workflow ComfyUI transforme une image fixe en une courte vidéo dynamique grâce au modèle image-vers-vidéo Gen4 Turbo de Runway. Il relie quatre nœuds : LoadImage pour importer l'image source, RunwayImageToVideoNodeGen4 pour appeler l'API Gen4 Turbo hébergée et synthétiser le mouvement, SaveVideo pour encoder le résultat en fichier vidéo standard, et un MarkdownNote avec liens et instructions de configuration. Comme le calcul principal passe par le nœud partenaire Runway, le workflow reste léger et rapide sur votre machine locale.
Techniquement, le nœud LoadImage fournit les pixels à RunwayImageToVideoNodeGen4, qui envoie l'image (et vos paramètres comme la durée et le FPS) à l'API Runway. L'API retourne un flux vidéo compatible avec le nœud SaveVideo de ComfyUI, qui encode le clip final (ex : MP4) au FPS choisi. Le nœud partenaire utilise HTTPS et nécessite une configuration réseau sécurisée (voir "À propos du nœud API" dans les notes de l'auteur) : exécutez depuis localhost/127.0.0.1 et assurez-vous que le HTTPS sortant est autorisé. Le résultat est une chaîne image-vers-vidéo propre et reproductible, facile à itérer : changez l'image d'entrée, ajustez les paramètres de mouvement/durée, et relancez pour explorer différents rendus.
API
Utiliser ce workflow depuis le code
Chaque workflow Comfy est un graphe JSON. Le contenu ci-dessous est ce workflow, exactement comme ComfyUI l’exécute — récupérez-le depuis l’URL, gardez-le dans le contrôle de version, ou chargez-le dans ComfyUI et exécutez-le nœud par nœud.
Exécutez-le depuis TypeScript ou Python avec le Comfy SDK. Le même code cible Comfy Cloud ou un ComfyUI auto-hébergé — seule l’URL de base change.
// Install (beta)
npm i @comfyorg/sdk
// Run "Runway: Gen4 Turbo Image vers Vidéo" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_runway_gen4_turo_image_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("4", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("6")[0].toFile("output.png"); // SaveVideoLe SDK prend un workflow au format API : ouvrez ce workflow dans ComfyUI et utilisez Fichier → Exporter le workflow (API).
L’accès à l’API Comfy Cloud nécessite un forfait avec clé API.
FAQ
