ACE-Step 1.5XL SFT: Текст в музыку

Генерируйте высококачественную музыку из текстовых промптов с помощью SFT-модели с 4B параметрами. Управляйте выходом с помощью CFG для точного следования промпту.

Input

Song lyrics with section tags like [Verse] and [Chorus]. Leave empty for an instrumental.

Genre, tempo, key, mood, instruments, arrangement and vocal style.

Length of the song.

Advanced settings

Tempo in beats per minute.

Default: 120

How closely the music follows the description.

Default: 7

Musical key and scale.

Language the lyrics are sung in.

Leave empty for a new result each run. Enter a number to repeat one.

The SFT model is tuned for about 50 steps; fewer is faster but rougher.

Default: 50

Beats per bar (4 = 4/4).

Output
Example
00:00

Попробовать пример

Об этом рабочем процессе

Этот Рабочий процесс ComfyUI превращает текстовые промпты в готовую музыку с помощью модели ACE-Step 1.5XL SFT (4B). Он следует знакомому diffusion-пайплайну, адаптированному под аудио: DualCLIPLoader и TextEncodeAceStepAudio1.5 преобразуют ваш промпт (и опциональный негативный промпт) в кондиционирование; EmptyAceStep1.5LatentAudio создаёт латентный аудио-холст на выбранную длительность; UNETLoader загружает модель ACE-Step 1.5XL SFT; а KSampler выполняет итеративное удаление шума под управлением CFG. ModelSamplingAuraFlow настраивает стратегию сэмплирования, оптимизированную для аудио ACE-Step, а VAELoader + VAEDecodeAudio преобразуют финальный латент обратно в волну, которую SaveAudioMP3 записывает на диск.

Технически CFG (classifier-free guidance) позволяет балансировать креативность и следование промпту: низкие значения CFG дают более широкий поиск, высокие — строже следуют тексту. ConditioningZeroOut обеспечивает чистую безусловную ветку, если вы не задаёте негативный промпт, что помогает стабильному направлению. Группы рабочего процесса (Model, Duration, Prompt) упрощают замену чекпойнтов, настройку секунд и итерации промптов. В результате получается практичный, воспроизводимый пайплайн «Текст в музыку», с которым можно быстро перебирать жанры, настроение, инструменты и структуру — для идей, чернового саундтрека и фоновых треков.

Вопросы и ответы