LTX 2.3 - Lipdub LoRA + Voice Clone

上傳一段 driving 影片並輸入想要的對白,即可使用 LTX 2.3 生成你的影片 lipdub。接著工作流程會用 Chatterbox 將配音音訊轉回原角色的聲線。這是一個完全開源的工作流程,用於替換 driving 影片中角色的說話內容。

Input

Describe the person and the scene, and write the new line in quotes after 'saying:'.

A clip of one person talking, with its audio. Their face and voice are reused.

First-pass height; the output is twice this (544 → 1088).

Default: 544

First-pass width; the output is twice this (960 → 1920).

Default: 960

Advanced settings

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

Output
00:00
Example

試試範例

關於此工作流程

此工作流程以 LTX 2.3 與 Chatterbox 聲音轉換為核心,建立完整、開源的 lip-dub 管線。你需要提供一段人物說話的「driving」影片,以及希望他說出的對白。LoadVideo 讀入影片,GetVideoComponents 擷取影格、FPS 與原始音訊。你輸入的對白會從 PrimitiveStringMultiline 提示詞經 RegexReplace 清理標點與空白後,送入 LTX 2.3 Lipdub 節點(自訂節點 ID:1e1eaad5-a949-4d3e-9a68-694e64a936a0)。該節點會在 LTX 2.3 上套用 Lipdub LoRA 微調,讓口型依你的腳本重新對時,同時盡量保留主體身分、頭部動作與場景脈絡。

音訊部分,同一段對白會先生成臨時配音軌,再送入 FL_ChatterboxVC。Chatterbox VC 會以原影片音訊(由 GetVideoComponents 取得)作為聲音參考,將配音重塑為接近說話者的音色與聲學特徵。最後,CreateVideo 以來源 FPS 組合編輯後影格與克隆音訊,SaveVideo 輸出最終唇形同步影片。請注意 MarkdownNote 的尺寸規則:輸入寬 × 高要設為目標輸出的一半(例如輸入 960×544,輸出約為 1920×1088)。

問答