이미지 → 노래 → 오디오 리액티브 비디오

ACE Step 1.5 XL로 노래를 만들고, LTX 2.3과 오디오-리액티브 LoRA로 오디오 반응형 비디오를 생성합니다.

정보

이 워크플로는 텍스트에서 음악 생성(ACE Step 1.5 XL Turbo)과 이미지에서 비디오로 애니메이션(LTX 2.3)을 결합하고, 오디오-리액티브 LoRA로 강화해 단일 이미지에서 음악이 포함된 오디오 반응형 비디오를 만듭니다. 이미지 1장과 짧은 크리에이티브 브리프를 제공하면, 워크플로는 GeminiNode를 사용해 비주얼용 "style tags"와 곡의 "lyrics"를 한 번에 초안으로 작성합니다. 그런 다음 RegexExtract 노드가 텍스트를 '---' 기준으로 분리합니다. '---' 이전은 LTX 2.3용 비주얼 스타일 태그가 되고, 이후는 ACE Step 1.5 XL Turbo에 가사로 입력됩니다. 생성된 곡은 SaveAudioMP3로 저장되며, 이후 SaveVideo로 저장되는 비디오의 반응형 움직임을 구동합니다.

제공할 항목

  • 워크플로 읽는 중

ComfyUI에서 실행됩니다. 이 워크플로는 이 페이지에서 실행할 수 없습니다. 모든 항목이 로드된 Comfy Cloud에서 열거나, 자체 ComfyUI에서 사용하려면 다운로드하세요.

Cloud에서 사용해 보기
출력
예시
Sample output

질문과 답변