Wan 2.1 ControlNet

Gere vídeos guiados por controles de pose, profundidade e borda usando Wan 2.1 ControlNet.

Input

A clip whose edges (Canny) drive the motion and layout; match the start image's composition.

Describe the video.

The first frame and the look of the video.

Output height. 960×544 is the default.

Number of frames (4n+1, e.g. 49, 77, 81); at 16 fps 77 frames is about 5 seconds.

Default: 77

Output width. 960×544 is the default.

Advanced settings

How closely the video follows the prompt.

Default: 6

Playback frames per second.

Default: 16

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

More steps add detail but take longer.

Default: 20

Output
00:00
Example

Experimente um exemplo

Sobre este fluxo de trabalho

O fluxo Wan 2.1 ControlNet foi criado para gerar vídeos guiados por controles de pose, profundidade e borda. Ele utiliza o modelo Wan2.1, conhecido por lidar bem com transformações vídeo-para-vídeo. O núcleo do fluxo é composto por nós como KSampler, CLIPTextEncode e VAEDecode, que processam quadros de vídeo e aplicam transformações estilísticas baseadas em prompts definidos pelo usuário. O uso do ControlNet permite controle preciso sobre características do vídeo, tornando possível manipular aspectos como pose e profundidade com alta precisão.

Tecnicamente, o fluxo começa carregando modelos e preparando o quadro inicial com nós como CLIPVisionLoader e LoadImage. O nó WanFunControlToVideo é fundamental, pois integra as funcionalidades do ControlNet para guiar o processo de transformação do vídeo. O grupo Sampling & Decode, que inclui nós como ModelSamplingSD3 e UNetTemporalAttentionMultiply, garante que o vídeo de saída mantenha alta qualidade e coerência entre os quadros. Este fluxo é especialmente útil para criadores que desejam produzir vídeos estilizados com efeitos visuais específicos, oferecendo alto grau de personalização e controle sobre o resultado final.

Perguntas e respostas