El flujo de trabajo LTX-2: Audio a Vídeo está diseñado para transformar un archivo de audio y un fotograma de imagen inicial en un vídeo sincronizado. Este proceso aprovecha el modelo LTX-2, conocido por su capacidad de interpretar señales de audio y traducirlas en contenido visual dinámico. El flujo de trabajo comienza con los Nodos 'LoadImage' y 'LoadAudio', que permiten a los usuarios introducir la imagen inicial y el archivo de audio que servirán como base para la generación de vídeo. Estas Entradas se procesan luego mediante una serie de Nodos personalizados, incluyendo 'comfyui-kjnodes', que son cruciales para mantener la sincronización entre los elementos de audio y vídeo.
A nivel técnico, el flujo de trabajo utiliza un Nodo único identificado por el ID '3458504c-2bd1-4267-8722-6f2478115b42', que desempeña un papel clave al alinear el ritmo y el tempo del audio con las transiciones visuales. El Nodo 'SaveVideo' es el paso final, convirtiendo los datos procesados en un archivo de vídeo. Este flujo de trabajo es especialmente útil para creadores que buscan producir contenido de vídeo atractivo a partir de pistas de audio, como videoclips o piezas de arte audiovisual. Su carácter experimental significa que los resultados pueden variar, ofreciendo una oportunidad particular para la exploración creativa.
API
Usa este flujo de trabajo desde código
Cada flujo de trabajo de Comfy es un grafo JSON. El siguiente payload es este flujo de trabajo, exactamente como lo ejecuta ComfyUI: descárgalo desde la URL, guárdalo en control de versiones o cárgalo en ComfyUI y ejecútalo nodo por nodo.
Ejecuta desde TypeScript o Python con el Comfy SDK. El mismo código funciona en Comfy Cloud o en un ComfyUI propio: solo cambia la URL base.
// Install (beta)
npm i @comfyorg/sdk
// Run "LTX-2: Audio a video" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("video_ltx_2_audio_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("444", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("984")[0].toFile("output.png"); // SaveVideoEl SDK utiliza un flujo de trabajo en formato API: abre este flujo de trabajo en ComfyUI y usa Archivo → Exportar flujo de trabajo (API).
El acceso a la API de Comfy Cloud requiere un plan con clave API.
Preguntas frecuentes
