ACE-Step 1.5 AI 가사 및 노래 생성
음악 스타일과 선택적 가사를 입력하세요. AI가 가사와 오디오를 포함한 완전한 노래를 생성합니다.
정보
ACE-Step 1.5 AI 가사 곡 생성 워크플로는 간단한 음악 스타일 입력과 선택적 가사를 완성된 곡으로 변환하는 고급 도구입니다. 이 워크플로는 ACE-Step 및 Google Gemini 모델을 활용해 텍스트와 오디오를 모두 합성하여 콘셉트부터 생성까지의 과정을 연결합니다. 핵심적으로 SaveAudioMP3 같은 노드로 최종 오디오 파일을 출력하고, GeminiNode로 AI 생성 콘텐츠를 처리합니다. RegexExtract 노드는 입력 데이터를 파싱하고 다듬는 데 사용되어, AI 출력이 일관되고 사용자의 의도에 맞도록 돕습니다. 이 워크플로는 뮤지션, 콘텐츠 크리에이터, 그리고 음악 제작에서 AI의 가능성을 탐색하고 싶은 사용자에게 유용합니다.
제공할 항목
- 워크플로 읽는 중
ComfyUI에서 실행됩니다. 이 워크플로는 이 페이지에서 실행할 수 없습니다. 모든 항목이 로드된 Comfy Cloud에서 열거나, 자체 ComfyUI에서 사용하려면 다운로드하세요.
Cloud에서 사용해 보기워크플로 내부
노드 그래프의 읽기 전용 미리보기입니다. 노드를 편집하려면 Comfy Cloud에서 열거나 다운로드하세요.
Loading the graph
Open full-size workflow preview이 워크플로의 파일
- 작성자
- ComfyUI
사용자 지정 노드 필요
- 워크플로 읽는 중
코드에서 이 워크플로 사용하기
가능한 경우 워크플로 그래프와 입력을 기반으로 생성되며, 그렇지 않은 경우 저장된 예시가 표시됩니다. 비용이 발생할 수 있으므로 코드를 실행하기 전에 자격 증명과 엔드포인트를 검토하세요.
What you need
- Runs on
- Comfy Cloud
- 키
- COMFY_API_KEY
유료 Cloud 요금제와 크레딧이 필요합니다.
# Python 3.10+: pip install comfy-sdk==0.4.0
import os
from comfy_sdk import Comfy
api_key = os.environ.get("COMFY_API_KEY", "").strip()
if not api_key: raise RuntimeError("Set COMFY_API_KEY")
os.environ.setdefault("COMFY_BASE_URL", "https://cloud.comfy.org")
client = Comfy(api_key=api_key)
workflow = client.workflows.from_json({
"1": {
"class_type": "SaveAudioMP3",
"inputs": {
"audio": [
"2:18",
0
],
"filename_prefix": "audio/ace-step-1.5",
"quality": "V0"
},
"_meta": {
"title": "Save Audio (MP3) (DEPRECATED)"
}
},
"7": {
"class_type": "PreviewAny",
"inputs": {
"source": [
"11",
0
]
},
"_meta": {
"title": "Preview as Text"
}
},
"11": {
"class_type": "GeminiNode",
"inputs": {
"model": "gemini-3-pro-preview",
"prompt": "A blues song, to rival the great Robert Johnson.",
"seed": 1046438542938789,
"system_prompt": "**Role:** You are a professional Music Architect for **ACE-Step 1.5**. \n\n**Task:** Generate a music creation plan.\n\n**Strict Output Constraint (IMPORTANT):**\n1. Return the output as **RAW PLAIN TEXT** only.\n2. DO NOT use Markdown code blocks (no backticks ```).\n3. DO NOT use any headers, labels, or bold text.\n4. Use ONLY the separator `---` to divide the two parts.\n5. Part 1: Comma-separated style keywords.\n6. Part 2: Structured lyrics with [Tags].\n\n**My Topic/Requirement:**\n[USER INPUT]"
},
"_meta": {
"title": "Google Gemini"
}
},
"18": {
"class_type": "RegexExtract",
"inputs": {
"case_insensitive": True,
"dotall": False,
"group_index": 1,
"mode": "First Group",
"multiline": False,
"regex_pattern": "(?sm)^(.*?)^---$(.*)",
"string": [
"11",
0
]
},
"_meta": {
"title": "Extract Text"
}
},
"19": {
"class_type": "RegexExtract",
"inputs": {
"case_insensitive": True,
"dotall": False,
"group_index": 1,
"mode": "First Group",
"multiline": False,
"regex_pattern": "(?s)(?<=\\n---\\n)([\\s\\S]*)$",
"string": [
"11",
0
]
},
"_meta": {
"title": "Extract Text"
}
},
"2:104": {
"class_type": "UNETLoader",
"inputs": {
"unet_name": "acestep_v1.5_turbo.safetensors",
"weight_dtype": "default"
},
"_meta": {
"title": "Load Diffusion Model"
}
},
"2:105": {
"class_type": "DualCLIPLoader",
"inputs": {
"clip_name1": "qwen_0.6b_ace15.safetensors",
"clip_name2": "qwen_4b_ace15.safetensors",
"device": "default",
"type": "ace"
},
"_meta": {
"title": "Load CLIP (Dual)"
}
},
"2:106": {
"class_type": "VAELoader",
"inputs": {
"vae_name": "ace_1.5_vae.safetensors"
},
"_meta": {
"title": "Load VAE"
}
},
"2:110": {
"class_type": "PrimitiveFloat",
"inputs": {
"value": 120
},
"_meta": {
"title": "Song Duration"
}
},
"2:18": {
"class_type": "VAEDecodeAudio",
"inputs": {
"samples": [
"2:3",
0
],
"vae": [
"2:106",
0
]
},
"_meta": {
"title": "VAE Decode Audio"
}
},
"2:3": {
"class_type": "KSampler",
"inputs": {
"cfg": 1,
"denoise": 1,
"latent_image": [
"2:98",
0
],
"model": [
"2:78",
0
],
"negative": [
"2:47",
0
],
"positive": [
"2:94",
0
],
"sampler_name": "euler",
"scheduler": "simple",
"seed": 27660246420877,
"steps": 8
},
"_meta": {
"title": "KSampler"
}
},
"2:47": {
"class_type": "ConditioningZeroOut",
"inputs": {
"conditioning": [
"2:94",
0
]
},
"_meta": {
"title": "Conditioning Zero Out"
}
},
"2:78": {
"class_type": "ModelSamplingAuraFlow",
"inputs": {
"model": [
"2:104",
0
],
"sampling": "flow",
"shift": 3
},
"_meta": {
"title": "ModelSamplingAuraFlow"
}
},
"2:94": {
"class_type": "TextEncodeAceStepAudio1.5",
"inputs": {
"bpm": 190,
"cfg_scale": 2,
"clip": [
"2:105",
0
],
"duration": [
"2:110",
0
],
"generate_audio_codes": True,
"keyscale": "E minor",
"language": "en",
"lyrics": [
"19",
0
],
"min_p": 0,
"seed": 27660246420877,
"tags": [
"18",
0
],
"temperature": 0.85,
"timesignature": "4",
"top_k": 0,
"top_p": 0.9
},
"_meta": {
"title": "TextEncodeAceStepAudio1.5"
}
},
"2:98": {
"class_type": "EmptyAceStep1.5LatentAudio",
"inputs": {
"batch_size": 1,
"seconds": [
"2:110",
0
]
},
"_meta": {
"title": "Empty Ace Step 1.5 Latent Audio"
}
}
})
# run() also passes api_key to the partner nodes in this workflow.
job = client.run(workflow, api_key=api_key)질문과 답변
원하는 어떤 음악 스타일이든 입력할 수 있습니다. AI는 지정한 스타일에 맞게 가사와 오디오를 생성하도록 설계되었습니다.
예. 직접 가사를 입력할 수 있으며, AI는 나머지 콘텐츠를 생성하면서 입력한 가사를 반영합니다.
최종 곡은 SaveAudioMP3 노드를 사용해 MP3 파일로 저장되며, 대부분의 오디오 플레이어와 호환됩니다.
아니오. 이 워크플로는 사용하기 쉽게 설계되었고, 명확한 안내와 직관적인 노드로 진행할 수 있습니다.