InfiniteTalk: Audio-Driven Full-Body Video Dubbing, tek bir görseli ve bir veya daha fazla ses parçasını; orijinal kimliği, arka planı ve kamera hareketini koruyarak dudak senkronlu, tam vücut bir videoya dönüştürür. Boru hattının çekirdeği WanInfiniteTalkToVideo’dur; yüklenen Wan2.1 I2V modelinden gelen özellikleri bir ses gömlemesiyle birleştirerek vücut ve yüz hareketini sürer. Step1 - Load Models, image-to-video sentezi için UNet ve VAE’yi (UNETLoader, VAELoader) hazırlar ve metin ile ses omurgalarını yükler (kamera/sahne istemleri için CLIPTextEncode ile CLIPLoader ve ses özellikleri için AudioEncoderEncode ile AudioEncoderLoader). Başlangıç karesini LoadImage ile içe aktarırsınız, ardından MaskEditor’da karakter başına maskeler çizerek hareketi her konuşmacıya yerelleştirirsiniz.
API
Bu iş akışını koddan kullan
Her Comfy iş akışı bir JSON grafiğidir. Aşağıdaki veri, bu iş akışının tam olarak ComfyUI'da çalıştırıldığı halidir — URL'den alın, sürüm kontrolünde saklayın veya ComfyUI'da yükleyip düğüm düğüm çalıştırın.
Comfy SDK ile TypeScript veya Python'dan çalıştırın. Aynı kod Comfy Cloud veya kendi barındırdığınız bir ComfyUI'ı hedefler — sadece temel URL değişir.
// Install (beta)
npm i @comfyorg/sdk
// Run "InfiniteTalk: Ses Tabanlı Tam Vücut Video Dublajı" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("video_wan2_1_infinitetalk_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("32", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("162")[0].toFile("output.png"); // SaveVideoSDK, API formatında bir iş akışı alır: bu iş akışını ComfyUI'da açın ve Dosya → İş Akışını Dışa Aktar (API) seçeneğini kullanın.
Comfy Cloud API erişimi, API anahtarı içeren bir plan gerektirir.
SSS
