LTX 2.3 - Lipdub LoRA + Clone de voix

Importez une vidéo de référence et saisissez le dialogue souhaité pour générer un lipdub de votre vidéo avec LTX 2.3. Le workflow clone ensuite l’audio doublé dans la voix du personnage original via Chatterbox. Workflow open source complet pour changer la parole d’un personnage à partir d’une vidéo de référence.

Input

Describe the person and the scene, and write the new line in quotes after 'saying:'.

A clip of one person talking, with its audio. Their face and voice are reused.

First-pass height; the output is twice this (544 → 1088).

Default: 544

First-pass width; the output is twice this (960 → 1920).

Default: 960

Advanced settings

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

Output
00:00
Example

Essayer un exemple

À propos de ce workflow

Ce flux de travail construit une chaîne complète de lip‑dub open source autour de LTX 2.3 et de la conversion vocale Chatterbox. Vous fournissez une vidéo « driving » d’une personne qui parle, ainsi que le dialogue que vous voulez lui faire dire. LoadVideo ingère le clip, et GetVideoComponents extrait les frames, le FPS et l’audio d’origine. Votre texte passe d’un prompt PrimitiveStringMultiline à RegexReplace pour nettoyer la ponctuation et les espaces, puis vers le nœud Lipdub LTX 2.3 (le nœud personnalisé avec l’ID 1e1eaad5-a949-4d3e-9a68-694e64a936a0). Ce nœud applique un finetune Lipdub LoRA à LTX 2.3 pour recaler les mouvements de bouche sur votre script tout en conservant l’identité du sujet, les mouvements de tête et le contexte de la scène.

Côté audio, le même dialogue pilote une piste de doublage temporaire, ensuite envoyée à FL_ChatterboxVC. En utilisant l’audio de la vidéo d’origine (depuis GetVideoComponents) comme référence de voix, Chatterbox VC re-voice le doublage afin de correspondre au timbre et aux caractéristiques vocales du locuteur. Enfin, CreateVideo assemble les frames modifiées et l’audio cloné au FPS source, et SaveVideo écrit le rendu final synchronisé labialement. Notez la règle de dimension du MarkdownNote : définissez la largeur × hauteur d’entrée à la moitié de la taille finale souhaitée (par exemple, 960×544 en entrée donne ~1920×1088 en sortie).

Questions-réponses