Этот Рабочий процесс ComfyUI превращает текстовые промпты в готовую музыку с помощью модели ACE-Step 1.5XL SFT (4B). Он следует знакомому diffusion-пайплайну, адаптированному под аудио: DualCLIPLoader и TextEncodeAceStepAudio1.5 преобразуют ваш промпт (и опциональный негативный промпт) в кондиционирование; EmptyAceStep1.5LatentAudio создаёт латентный аудио-холст на выбранную длительность; UNETLoader загружает модель ACE-Step 1.5XL SFT; а KSampler выполняет итеративное удаление шума под управлением CFG. ModelSamplingAuraFlow настраивает стратегию сэмплирования, оптимизированную для аудио ACE-Step, а VAELoader + VAEDecodeAudio преобразуют финальный латент обратно в волну, которую SaveAudioMP3 записывает на диск.
Технически CFG (classifier-free guidance) позволяет балансировать креативность и следование промпту: низкие значения CFG дают более широкий поиск, высокие — строже следуют тексту. ConditioningZeroOut обеспечивает чистую безусловную ветку, если вы не задаёте негативный промпт, что помогает стабильному направлению. Группы рабочего процесса (Model, Duration, Prompt) упрощают замену чекпойнтов, настройку секунд и итерации промптов. В результате получается практичный, воспроизводимый пайплайн «Текст в музыку», с которым можно быстро перебирать жанры, настроение, инструменты и структуру — для идей, чернового саундтрека и фоновых треков.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "ACE-Step 1.5XL SFT: Текст в музыку" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("audio_ace_step1_5_xl_sft_api.json");
const job = await client.run(wf);
await job.getOutputs("107")[0].toFile("output.png"); // SaveAudioMP3SDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
