Wan 2.1 ControlNet

Генерируйте видео, управляемые контролем позы, глубины и краев, с помощью Wan 2.1 ControlNet.

Input

A clip whose edges (Canny) drive the motion and layout; match the start image's composition.

Describe the video.

The first frame and the look of the video.

Output height. 960×544 is the default.

Number of frames (4n+1, e.g. 49, 77, 81); at 16 fps 77 frames is about 5 seconds.

Default: 77

Output width. 960×544 is the default.

Advanced settings

How closely the video follows the prompt.

Default: 6

Playback frames per second.

Default: 16

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

More steps add detail but take longer.

Default: 20

Output
00:00
Example

Попробовать пример

Об этом рабочем процессе

Рабочий процесс Wan 2.1 ControlNet предназначен для генерации видео, направляемого контролями позы, глубины и контуров. Он использует возможности модели Wan2.1, которая известна надёжной работой в преобразованиях видео-в-видео. Основа Рабочего процесса построена вокруг ключевых нод, таких как KSampler, CLIPTextEncode и VAEDecode, которые вместе обрабатывают кадры входного видео и применяют стилистические преобразования по пользовательским промптам. Использование ControlNet даёт точный контроль над характеристиками видео и позволяет управлять такими аспектами, как поза и глубина, с высокой точностью.

Технически Рабочий процесс начинается с загрузки моделей и подготовки стартового кадра через ноды вроде CLIPVisionLoader и LoadImage. Нода WanFunControlToVideo важна тем, что интегрирует функции ControlNet и направляет процесс преобразования видео. Группа Sampling & Decode, куда входят ModelSamplingSD3 и UNetTemporalAttentionMultiply, помогает сохранить качество и согласованность по кадрам. Этот Рабочий процесс полезен создателям, которым нужны стилизованные видео с заданными визуальными эффектами, и даёт высокий уровень настройки и контроля над итогом.

Вопросы и ответы