MiniMax H3: 참조 기반 비디오 생성

MiniMax H3에 참조 이미지, 최대 9장의 이미지, 3개의 비디오, 3개의 오디오 클립과 텍스트 프롬프트를 함께 입력하여, 인물의 정체성, 동작, 카메라, 목소리, 스타일 등을 참조 소스와 일치시키면서 네이티브 스테레오 오디오가 포함된 새로운 비디오를 한 번에 생성합니다. 출력은 최대 2K 해상도, 24fps, 약 15초 길이의 단일 MP4 비디오입니다. 캐릭터 일관성 애니메이션, 스타일 전이 비디오 생성, 오디오 싱크 콘텐츠 제작에 적합합니다.

Input

Name the references as <Picture 1> and <Picture 2>; describe shots, camera moves and sound.

Referred to as <Picture 1> in the prompt.

Referred to as <Picture 2> in the prompt.

Advanced settings

Leave empty for a new result each run. Enter a number to repeat one.

On: 4-step turbo LoRA (fast). Off: 20 steps.

Output
00:00
Example

예시 사용해 보기

이 워크플로 정보

이 워크플로는 ComfyUI에서 MiniMax H3의 레퍼런스-투-비디오 생성을 보여줍니다. 텍스트 프롬프트와 함께 최대 9장의 레퍼런스 이미지, 3개의 짧은 레퍼런스 비디오, 3개의 오디오 클립을 제공하면, 모델이 스테레오 오디오가 포함된 단일 MP4를 한 번에 생성합니다. 핵심은 MiniMaxH3ReferenceToVideo 노드로, 프롬프트와 함께 멀티모달 컨텍스트(정체성, 모션, 카메라, 스타일, 음성)를 결합해 최대 2K 해상도와 24fps에서 약 15초 클립을 합성합니다.

내부적으로 Switch Model and Settings 그룹은 UNETLoader와 CLIPLoader로 MiniMax H3 모델 스택을 로드하고, KSamplerSelect, BasicScheduler, SamplerCustomAdvanced, BasicGuider가 샘플링 동작을 관리합니다(재현성을 위해 RandomNoise가 시드 제공). ResolutionSelector는 32의 배수에 맞춘 16:9 크기를 설정하며, ComfyMathExpression과 PrimitiveFloat는 재생 시간과 fps로부터 프레임 수 같은 파생 값을 계산합니다. 생성 후 VAELoader는 비디오 및 오디오 VAE를 제공하고, VAEDecode는 비디오 잠재 데이터에서 프레임을 복원하며 VAEDecodeAudio는 스테레오 파형을 복원합니다. CreateVideo는 프레임과 오디오를 멀티플렉싱하고 SaveVideo는 최종 MP4를 저장합니다. 이 구성은 별도의 TTS나 사운드 디자인 단계 없이도 캐릭터 일관성 애니메이션, 스타일 가이드 모션, 오디오 싱크 콘텐츠 제작에 실용적입니다.

질문과 답변