O fluxo LTX-2: Áudio para Vídeo foi projetado para transformar um arquivo de áudio e uma imagem inicial em um vídeo sincronizado. O processo utiliza o modelo LTX-2, conhecido por interpretar sinais de áudio e traduzi-los em conteúdo visual dinâmico. O fluxo começa com os nós 'LoadImage' e 'LoadAudio', permitindo ao usuário inserir a imagem e o áudio que servirão de base para a geração do vídeo. Essas entradas são processadas por uma série de nós customizados, incluindo 'comfyui-kjnodes', essenciais para manter a sincronização entre áudio e visual.
Tecnicamente, o fluxo utiliza um nó exclusivo identificado pelo ID '3458504c-2bd1-4267-8722-6f2478115b42', que desempenha papel fundamental no alinhamento do ritmo e tempo do áudio com as transições visuais. O nó 'SaveVideo' é o passo final, convertendo os dados processados em um arquivo de vídeo. Este fluxo é especialmente útil para criadores que desejam produzir vídeos envolventes a partir de faixas de áudio, como videoclipes ou peças de arte audiovisual. Por ser experimental, os resultados podem variar, oferecendo uma oportunidade única de exploração criativa.
API
Use este workflow a partir do código
Todo workflow Comfy é um grafo JSON. O payload abaixo é este workflow, exatamente como o ComfyUI executa — obtenha-o pela URL, mantenha-o no controle de versão ou carregue-o no ComfyUI e execute nó por nó.
Execute a partir de TypeScript ou Python com o Comfy SDK. O mesmo código serve para o Comfy Cloud ou um ComfyUI hospedado por você — apenas a URL base muda.
// Install (beta)
npm i @comfyorg/sdk
// Run "LTX-2: Áudio para Vídeo" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("video_ltx_2_audio_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("444", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("984")[0].toFile("output.png"); // SaveVideoO SDK utiliza um workflow no formato API: abra este workflow no ComfyUI e use Arquivo → Exportar Workflow (API).
O acesso à API do Comfy Cloud requer um plano com chave de API.
FAQ
