El Flujo de trabajo 'Grok: Reference to Video' en ComfyUI está diseñado para transformar imágenes de referencia estáticas en contenido de vídeo dinámico. Este Flujo de trabajo aprovecha la API de Grok para crear vídeos que mantengan una alta consistencia visual entre fotogramas, incluso usando hasta seis imágenes de referencia. El proceso comienza con el nodo 'LoadImage', donde puedes subir tus imágenes de referencia. Luego, estas imágenes se procesan en 'GrokVideoReferenceNode', que utiliza el modelo Grok para interpretar y transformar los visuales estáticos en una secuencia de vídeo coherente. Por último, el nodo 'SaveVideo' te permite exportar el vídeo generado para usarlo en diversas aplicaciones.
Lo que diferencia a este Flujo de trabajo es su capacidad para manejar varias imágenes de referencia, asegurando que el vídeo resultante mantenga un estilo y una representación de personaje consistentes. Esto es especialmente útil para proyectos que requieren animación de personajes o un estilo artístico coherente entre fotogramas. Las capacidades avanzadas del modelo Grok permiten una interpretación matizada de las imágenes de Entrada, lo que hace que este Flujo de trabajo sea una herramienta útil para creadores que quieren convertir arte estático en contenido de vídeo atractivo.
API
Usa este flujo de trabajo desde código
Cada flujo de trabajo de Comfy es un grafo JSON. El siguiente payload es este flujo de trabajo, exactamente como lo ejecuta ComfyUI: descárgalo desde la URL, guárdalo en control de versiones o cárgalo en ComfyUI y ejecútalo nodo por nodo.
Ejecuta desde TypeScript o Python con el Comfy SDK. El mismo código funciona en Comfy Cloud o en un ComfyUI propio: solo cambia la URL base.
// Install (beta)
npm i @comfyorg/sdk
// Run "Grok: referencia a vídeo" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_grok_reference_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("6", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("4")[0].toFile("output.png"); // SaveVideoEl SDK utiliza un flujo de trabajo en formato API: abre este flujo de trabajo en ComfyUI y usa Archivo → Exportar flujo de trabajo (API).
El acceso a la API de Comfy Cloud requiere un plan con clave API.
Preguntas frecuentes
