LTX 2.3 - Lipdub LoRA + Ses Klonlama

Sürüş videonu yükle ve istenen diyaloğu istem olarak ver; LTX 2.3 kullanarak videon için bir lipdub oluştur. Ardından İş Akışı, dublajlı sesini Chatterbox ile tekrar orijinal karakterin sesine klonlar. Sürüş videosundan karakterinin konuşmasını değiştirmek için tamamen açık kaynak bir İş Akışı’dır.

Input

Describe the person and the scene, and write the new line in quotes after 'saying:'.

A clip of one person talking, with its audio. Their face and voice are reused.

First-pass height; the output is twice this (544 → 1088).

Default: 544

First-pass width; the output is twice this (960 → 1920).

Default: 960

Advanced settings

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

Output
00:00
Example

Bir örnek deneyin

Bu iş akışı hakkında

Bu iş akışı, LTX 2.3 ve Chatterbox ses dönüştürme etrafında tam bir açık kaynak lip-dub hattı kurar. Konuşan bir kişinin "sürücü" videosunu ve söylemesini istediğiniz diyaloğu sağlarsınız. LoadVideo klibinizi alır, GetVideoComponents kareleri, FPS ve orijinal sesi çıkarır. Yazdığınız diyalog, PrimitiveStringMultiline isteminden RegexReplace ile noktalama ve boşluk temizliği yapılarak LTX 2.3 Lipdub düğümüne (özel düğüm ID: 1e1eaad5-a949-4d3e-9a68-694e64a936a0) aktarılır. Bu düğüm, LTX 2.3'e bir Lipdub LoRA ince ayarı uygulayarak ağız hareketlerini senaryonuza göre zamanlar ve öznenin kimliğini, baş hareketini ve sahne bütünlüğünü korur.

Ses için, aynı diyalog geçici bir dublaj parçası oluşturur ve bu FL_ChatterboxVC'ye aktarılır. Orijinal videonun sesi (GetVideoComponents'tan) ses referansı olarak kullanılarak, Chatterbox VC dublajı konuşmacının tınısı ve vokal özelliklerine uygun şekilde yeniden seslendirir. Son olarak, CreateVideo düzenlenmiş kareleri ve klonlanmış sesi kaynak FPS ile birleştirir, SaveVideo ise nihai lip-sync'li çıktıyı kaydeder. MarkdownNote'daki boyut kuralına dikkat edin: giriş genişliği × yüksekliği hedefinizin yarısı olmalı (örneğin, 960×544 giriş ~1920×1088 çıktı verir).

Sorular ve yanıtlar