LTX-2 Pose vers Vidéo

Générer des vidéos de haute qualité à partir d’une guidance de pose avec une génération audio-vidéo synchronisée à l’aide de LTX-2. Dispose d’un contrôle précis des poses, d’un mouvement expressif et d’une performance efficace.

Input

The person to animate, full body and facing the camera; it becomes the first frame.

A clip of someone moving; their body pose (DWPose) drives the character. Match the framing of the character image.

Describe the scene, the motion and any sound.

Number of frames to read from the pose video (8n+1, e.g. 97, 121); 121 frames at 24 fps is about 5 seconds.

Default: 121

1280×720 is the default; the model snaps to the nearest size it supports.

1280×720 is the default; the model snaps to the nearest size it supports.

Advanced settings

Frames per second; set it to the pose video's rate.

Default: 24

Don't use the character image as the first frame (the pose still follows the video).

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

Output
00:00
Example

Essayer un exemple

À propos de ce workflow

Le workflow LTX-2 Pose vers Vidéo est conçu pour transformer des indications de pose en contenu vidéo de haute qualité avec génération audio et vidéo synchronisée. Utilisant le modèle LTX-2 de Lightricks, ce workflow offre un contrôle précis de la pose et des mouvements expressifs, idéal pour créer des vidéos dynamiques. Il intègre divers nœuds comme GetVideoComponents, PreviewImage et SaveVideo, qui permettent de décomposer la vidéo, prévisualiser les images et sauvegarder le résultat final. Un point clé est l'utilisation des nœuds personnalisés comfyui_controlnet_aux, qui améliorent la précision du contrôle de pose et l'expressivité du mouvement.

Techniquement, le workflow commence par le prétraitement vidéo et image via des nœuds comme LoadVideo et ResizeImageMaskNode. Il utilise ensuite le DWPreprocessor pour affiner les paramètres vidéo, assurant un nombre d'images et une résolution optimaux. Le workflow gère des résolutions jusqu'à 1920x1088, mais utilise par défaut le 720p pour l'efficacité. Le nombre d'images doit être divisible par 8 plus 1, garantissant des transitions fluides et une bonne synchronisation. Ce workflow est particulièrement utile pour les créateurs souhaitant produire des vidéos avec des mouvements détaillés et un audio synchronisé, en tirant parti de la puissance du modèle LTX-2 pour des résultats professionnels.

Questions-réponses