Depth Motion Capture with Seedance 2.0
Feed a reference video through depth extraction to strip away everything but structure — pure spatial motion, no pixels, no color, no identity. That depth sequence becomes the skeleton. Hand the skeleton to Seedance 2.0 as your motion reference, then drop in a reference image to define the look. The depth map dictates how things move; the image dictates what they are. Camera moves, body motion, and scene geometry carry over intact while the visual identity is fully swapped. Dial in duration, resolution, and aspect ratio to match your target format. Route the original audio straight through to the final output so the new footage stays locked to the source timing.
정보
Seedance 2.0 Depth Dancer는 소스 클립을 깊이 맵 시퀀스로 변환해 모션 '스켈레톤'을 만들고, 단일 참조 이미지로 비주얼을 재구성합니다. VHS_LoadVideo로 참조 영상(및 오디오)을 불러오고, 커스텀 Seedance 2.0 노드(4871bd59-7f4e-475a-a872-bf5457365402)가 각 프레임을 깊이로 변환해 카메라 무브, 신체 동작, 장면 구조를 캡처합니다. 이후 LoadImage로 정의한 외형을 기반으로 새 프레임을 합성합니다. 마지막으로 SaveVideo가 생성된 프레임을 조립하고, 원본 사운드트랙을 그대로 전달해 싱크를 맞춥니다.
제공할 항목
- 워크플로 읽는 중
ComfyUI에서 실행됩니다. 이 워크플로는 이 페이지에서 실행할 수 없습니다. 모든 항목이 로드된 Comfy Cloud에서 열거나, 자체 ComfyUI에서 사용하려면 다운로드하세요.
Cloud에서 사용해 보기질문과 답변
포즈 트랜스퍼는 2D 키포인트를 사용하지만, 이 워크플로는 프레임별 깊이 맵을 사용합니다. 깊이는 카메라 움직임과 장면 기하(패럴랙스, 상대 거리)를 보존해 움직임이 더 3D처럼 느껴지고 원본 샷에 더 충실해집니다.
설계상 어렵습니다. 깊이 단계는 픽셀 아이덴티티와 색상을 제거하고, Seedance 2.0 합성이 레퍼런스 이미지로부터 비주얼을 재구성합니다. 원본 배경이 필요하다면, 새 렌더와 원본 플레이트를 사용해 편집기에서 나중에 합성하세요.
모션 블러나 저조도에서는 깊이 품질이 떨어집니다. 더 깨끗한 소스 푸티지(더 높은 셔터 속도, 더 많은 빛)를 사용하고, 소스와 출력 간 비율을 일치시키며, 과도한 크롭을 피하세요. VHS_LoadVideo와 SaveVideo의 FPS를 맞추는 것도 안정성에 도움이 됩니다.
VHS_LoadVideo부터 SaveVideo까지 프레임 구간과 FPS를 일관되게 유지하고, VHS_LoadVideo의 오디오 출력과 SaveVideo의 오디오 입력을 연결하세요. 이렇게 하면 최종 렌더에서 원본 타이밍과 사운드트랙이 유지됩니다.
관련 워크플로
- Seedance 2.0
4K Seedance 2.0 - 참조 → 비디오
- Seedance 2.0
Seedance 2.0 레퍼런스→비디오 - 컨셉아트+스톱모션 스타일
- Seedance 2.0
Seedance 2.0 멀티프레임 스티치
- Seedance 2.0
Seedance 2.0 이미지에서 비디오로
- Seedance 2.0
Seedance 2.0: 레퍼런스 기반 비디오 생성
- Seedance 2.0
Seedance 2.0: 텍스트 기반 비디오 생성
- Seedance 2.0
Seedance2.0 리얼 휴먼: FLF2V
- Seedance 2.0
Seedance2.0: 첫/마지막 프레임 기반 비디오 생성