LTX-2: Sesten Videoya iş akışı, bir ses dosyası ve başlangıç görselini senkronize bir videoya dönüştürmek için tasarlanmıştır. Bu süreç, ses ipuçlarını yorumlayıp bunları dinamik görsel içeriğe dönüştürme yeteneğiyle bilinen LTX-2 modelinden yararlanır. İş akışı, başlangıç görseli ve ses dosyasını yüklemenizi sağlayan 'LoadImage' ve 'LoadAudio' düğümleriyle başlar. Bu girdiler, ses ve görsel öğeler arasındaki senkronizasyonu sağlamak için kritik olan 'comfyui-kjnodes' gibi özel düğümlerden geçirilir.
Teknik olarak, iş akışı '3458504c-2bd1-4267-8722-6f2478115b42' kimlikli benzersiz bir düğüm kullanır; bu düğüm, sesin ritmi ve temposunu görsel geçişlerle hizalamada önemli rol oynar. Son adımda 'SaveVideo' düğümü, işlenmiş verileri bir video dosyasına dönüştürür. Bu iş akışı, özellikle ses parçalarından etkileyici video içerikleri üretmek isteyen yaratıcılar için uygundur; örneğin müzik videoları veya ses-görsel sanat eserleri. Deneysel yapısı nedeniyle sonuçlar değişkenlik gösterebilir ve yaratıcı keşif için benzersiz bir fırsat sunar.
API
Bu iş akışını koddan kullan
Her Comfy iş akışı bir JSON grafiğidir. Aşağıdaki veri, bu iş akışının tam olarak ComfyUI'da çalıştırıldığı halidir — URL'den alın, sürüm kontrolünde saklayın veya ComfyUI'da yükleyip düğüm düğüm çalıştırın.
Comfy SDK ile TypeScript veya Python'dan çalıştırın. Aynı kod Comfy Cloud veya kendi barındırdığınız bir ComfyUI'ı hedefler — sadece temel URL değişir.
// Install (beta)
npm i @comfyorg/sdk
// Run "LTX-2: Sesli Görüntü" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("video_ltx_2_audio_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("444", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("984")[0].toFile("output.png"); // SaveVideoSDK, API formatında bir iş akışı alır: bu iş akışını ComfyUI'da açın ve Dosya → İş Akışını Dışa Aktar (API) seçeneğini kullanın.
Comfy Cloud API erişimi, API anahtarı içeren bir plan gerektirir.
SSS
