Wan VACE Control видео

Генерация видео путем управления входными видео и опорными изображениями с использованием Wan VACE.

Input

The motion to follow, e.g. a pose, depth or edge video.

Describe the subject, the action and the scene.

The character or subject that should appear in the video.

In steps of 16.

Default: 720

At 16 fps, 81 frames is about 5 seconds. Use 4n+1 values.

In steps of 16. The 14B model supports 480p and 720p.

Default: 720

Advanced settings

1 with the CausVid LoRA; about 6 without it.

Default: 1

Frames per second.

Default: 16

Speed LoRA; 0.3 to 0.7 works best.

Default: 0.3

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

4 with the CausVid LoRA; about 20 without it.

Default: 4

How closely the video follows the control video.

Default: 1

Output
00:00
Example

Попробовать пример

Об этом рабочем процессе

Wan2.1 VACE Control Video — это направляемый рабочий процесс video-to-video, который сохраняет движение и тайминг исходного видео, одновременно меняя стиль или персонажа по текстовому запросу и референс-изображению. Он загружает чекпойнты Wan2.1 VACE (1.3B или 14B) через UNETLoader и VAELoader, кодирует ваш текст с помощью CLIPTextEncode и задаёт условие генерации контрольными сигналами, полученными из простой предобработки изображения (по умолчанию Canny). GetVideoComponents считывает кадры и FPS из входного клипа, а TrimVideoLatent удерживает латентную последовательность выровненной с выбранным диапазоном кадров и разрешением перед выборкой.

Внутри ModelSamplingSD3 настраивает ожидаемый график сэмплера для Wan2.1 VACE, а KSampler выполняет денойзинг последовательности видео-латентов, собранной WanVaceToVideo из вашего контрольного видео, промпта и референс-изображения. VAEDecode преобразует финальные латенты обратно в кадры, CreateVideo собирает их с нужным FPS, и вы можете экспортировать либо MP4 (SaveVideo), либо анимированный WebP (SaveAnimatedWEBP). Опциональная CausVid LoRA (LoraLoader) может ускорить или стабилизировать движение при очень малом числе шагов, но может потребоваться настройка силы. Модель 14B даёт более высокую точность (и поддерживает 720p), но работает медленнее и требует больше VRAM; вариант 1.3B быстрее и лучше подходит для выходов 480p.

Вопросы и ответы