Este flujo de trabajo de ComfyUI crea clips de video personalizados con sincronización labial condicionando LTX-2.3 en tres entradas: una imagen de referencia (apariencia), un clip de audio corto (ritmo y estilo vocal) y una indicación estructurada (escena, transcripción y contexto sonoro). La lógica principal está encapsulada en un subgrafo (nodo personalizado con ID 98ee9e5b-467b-40aa-a534-36033f27d0b4), que orquesta la generación de LTX-2.3 con condicionamiento de identidad ID-LoRA. LoadImage proporciona la referencia facial/pose, LoadAudio o RecordAudio suministra tu voz, y SaveVideo guarda el video final. Un MarkdownNote en el canvas resume el formato de la indicación estructurada y enlaza a los recursos de LTX-2.3 e ID-LoRA.
Técnicamente, ID-LoRA inyecta un adaptador de identidad ligero en el proceso de difusión de video de LTX-2.3 para que la persona generada coincida con la imagen de referencia sin necesidad de un ajuste fino completo. La indicación se divide en tres etiquetas que espera el subgrafo: [VISUAL] (escena y apariencia), [SPEECH] (las palabras exactas a decir) y [SOUNDS] (estilo del hablante y ambiente). El audio dirige las formas de la boca y el ritmo, mientras que [SPEECH] ayuda al modelo a resolver detalles a nivel de fonema para una articulación labial más clara. El resultado es un video corto de tu sujeto diciendo la línea proporcionada, visualmente alineado con la imagen de referencia y sincronizado temporalmente con el audio.
API
Usa este flujo de trabajo desde código
Cada flujo de trabajo de Comfy es un grafo JSON. El siguiente payload es este flujo de trabajo, exactamente como lo ejecuta ComfyUI: descárgalo desde la URL, guárdalo en control de versiones o cárgalo en ComfyUI y ejecútalo nodo por nodo.
Ejecuta desde TypeScript o Python con el Comfy SDK. El mismo código funciona en Comfy Cloud o en un ComfyUI propio: solo cambia la URL base.
// Install (beta)
npm i @comfyorg/sdk
// Run "LTX-2.3: ID LoRA" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("video_ltx2_3_id_lora_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("269", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("341")[0].toFile("output.png"); // SaveVideoEl SDK utiliza un flujo de trabajo en formato API: abre este flujo de trabajo en ComfyUI y usa Archivo → Exportar flujo de trabajo (API).
El acceso a la API de Comfy Cloud requiere un plan con clave API.
Preguntas frecuentes
