InfiniteTalk: Dublagem de Vídeo Corporal Completo Acionada por Áudio

Faça upload de uma imagem de origem e um áudio alvo. Gere um vídeo dublado de corpo inteiro com movimento sincronizado, preservando a identidade original, o plano de fundo e o movimento da câmera.

Sobre

InfiniteTalk: Dublagem de Vídeo Corporal Completo Guiada por Áudio transforma uma única imagem e uma ou mais faixas de áudio em um vídeo de corpo inteiro sincronizado com os lábios, preservando a identidade original, o fundo e o movimento da câmera. O núcleo do pipeline é o WanInfiniteTalkToVideo, que funde recursos do modelo Wan2.1 I2V carregado com um embedding de áudio para guiar o movimento corporal e facial. O Passo 1 - Carregar Modelos prepara o UNet e o VAE (UNETLoader, VAELoader) para síntese de imagem para vídeo, e carrega os backbones de texto e áudio (CLIPLoader com CLIPTextEncode para prompts de câmera/palco, e AudioEncoderLoader com AudioEncoderEncode para características de voz). Você importa o quadro inicial via LoadImage, depois desenha máscaras por personagem no MaskEditor para localizar o movimento em cada falante.

O que você fornece

  • Lendo o fluxo de trabalho

É executado no ComfyUI. Este fluxo de trabalho não pode ser executado nesta página. Abra-o no Comfy Cloud com tudo carregado ou baixe-o para usar no seu próprio ComfyUI.

Experimentar no Cloud
Saída
Exemplo
Courtyard reunion, two speakers

Perguntas e respostas