Bu iş akışı, LTX 2.3 ve Chatterbox ses dönüştürme etrafında tam bir açık kaynak lip-dub hattı kurar. Konuşan bir kişinin "sürücü" videosunu ve söylemesini istediğiniz diyaloğu sağlarsınız. LoadVideo klibinizi alır, GetVideoComponents kareleri, FPS ve orijinal sesi çıkarır. Yazdığınız diyalog, PrimitiveStringMultiline isteminden RegexReplace ile noktalama ve boşluk temizliği yapılarak LTX 2.3 Lipdub düğümüne (özel düğüm ID: 1e1eaad5-a949-4d3e-9a68-694e64a936a0) aktarılır. Bu düğüm, LTX 2.3'e bir Lipdub LoRA ince ayarı uygulayarak ağız hareketlerini senaryonuza göre zamanlar ve öznenin kimliğini, baş hareketini ve sahne bütünlüğünü korur.
Ses için, aynı diyalog geçici bir dublaj parçası oluşturur ve bu FL_ChatterboxVC'ye aktarılır. Orijinal videonun sesi (GetVideoComponents'tan) ses referansı olarak kullanılarak, Chatterbox VC dublajı konuşmacının tınısı ve vokal özelliklerine uygun şekilde yeniden seslendirir. Son olarak, CreateVideo düzenlenmiş kareleri ve klonlanmış sesi kaynak FPS ile birleştirir, SaveVideo ise nihai lip-sync'li çıktıyı kaydeder. MarkdownNote'daki boyut kuralına dikkat edin: giriş genişliği × yüksekliği hedefinizin yarısı olmalı (örneğin, 960×544 giriş ~1920×1088 çıktı verir).
API
Bu iş akışını koddan kullan
Her Comfy iş akışı bir JSON grafiğidir. Aşağıdaki veri, bu iş akışının tam olarak ComfyUI'da çalıştırıldığı halidir — URL'den alın, sürüm kontrolünde saklayın veya ComfyUI'da yükleyip düğüm düğüm çalıştırın.
Comfy SDK ile TypeScript veya Python'dan çalıştırın. Aynı kod Comfy Cloud veya kendi barındırdığınız bir ComfyUI'ı hedefler — sadece temel URL değişir.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");SDK, API formatında bir iş akışı alır: bu iş akışını ComfyUI'da açın ve Dosya → İş Akışını Dışa Aktar (API) seçeneğini kullanın.
Comfy Cloud API erişimi, API anahtarı içeren bir plan gerektirir.
SSS
