Wan VACE 제어 비디오

Wan VACE를 사용하여 입력 비디오와 참조 이미지를 제어하여 비디오를 생성합니다.

Input

The motion to follow, e.g. a pose, depth or edge video.

Describe the subject, the action and the scene.

The character or subject that should appear in the video.

In steps of 16.

Default: 720

At 16 fps, 81 frames is about 5 seconds. Use 4n+1 values.

In steps of 16. The 14B model supports 480p and 720p.

Default: 720

Advanced settings

1 with the CausVid LoRA; about 6 without it.

Default: 1

Frames per second.

Default: 16

Speed LoRA; 0.3 to 0.7 works best.

Default: 0.3

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

4 with the CausVid LoRA; about 20 without it.

Default: 4

How closely the video follows the control video.

Default: 1

Output
00:00
Example

예시 사용해 보기

이 워크플로 정보

Wan2.1 VACE Control Video는 소스 비디오의 모션과 타이밍을 유지하면서 텍스트 프롬프트 및 참조 이미지로 스타일을 바꾸거나 캐릭터를 재구성하는 가이드형 비디오-투-비디오 워크플로입니다. UNETLoader 및 VAELoader로 Wan2.1 VACE 체크포인트(1.3B 또는 14B)를 로드하고, CLIPTextEncode로 텍스트를 인코딩하며, 간단한 이미지 전처리(기본값: Canny)에서 파생된 컨트롤 신호로 생성 조건을 구성합니다. GetVideoComponents가 입력 클립에서 프레임 및 FPS를 읽고, TrimVideoLatent가 샘플링 전에 선택한 프레임 범위 및 해상도에 맞게 잠재 데이터 시퀀스를 정렬된 상태로 유지합니다.

내부적으로 ModelSamplingSD3가 Wan2.1 VACE에 필요한 샘플러 스케줄을 구성하고, KSampler가 컨트롤 비디오, 프롬프트, 참조 이미지를 사용해 WanVaceToVideo가 조립한 비디오 잠재 데이터 시퀀스에 대해 디노이징을 수행합니다. VAEDecode가 최종 잠재 데이터를 프레임으로 되돌리고, CreateVideo가 원하는 FPS로 이를 합치며, MP4(SaveVideo) 또는 애니메이션 WebP(SaveAnimatedWEBP)로 내보낼 수 있습니다. 선택적으로 CausVid LoRA(LoraLoader)를 사용하면 매우 낮은 스텝으로 모션을 가속하거나 안정화할 수 있지만, 강도는 튜닝이 필요할 수 있습니다. 14B 모델은 더 높은 충실도(및 720p 지원)를 제공하지만 더 느리고 더 많은 VRAM을 사용하며, 1.3B 변형은 더 빠르고 480p 출력에 적합합니다.

질문과 답변