Рабочий процесс ACE-Step v1 Text to Instrumentals Music в ComfyUI предназначен для преобразования текстовых запросов в инструментальные аудиотреки. Он использует модель ACE-Step, специально настроенную для генерации музыки по текстовым описаниям. Процесс начинается с ноды TextEncodeAceStepAudio, которая кодирует входной текстовый запрос в формат, подходящий для генерации аудио. Далее эта информация проходит через ряд нод, включая EmptyAceStepLatentAudio и VAEDecodeAudio, чтобы получить латентное представление аудио и затем декодировать его в слышимый формат. В рабочий процесс также включены ноды LatentApplyOperationCFG и LatentOperationTonemapReinhard для доработки выхода, чтобы сгенерированная музыка точнее соответствовала ожиданиям пользователя.
Ценность этого рабочего процесса в том, что он позволяет получать качественную инструментальную музыку из простых текстовых описаний — полезно для создателей контента, музыкантов и разработчиков, которым нужны кастомные аудиодорожки. Ноды CheckpointLoaderSimple и KSampler добавляют гибкость при загрузке модели и выборке, а SaveAudioMP3 обеспечивает сохранение финального результата в распространённом аудиоформате. Этот рабочий процесс упрощает сложный процесс преобразования текста в аудио и даёт основу для творческих экспериментов с генерацией музыки.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "ACE-Step v1 текст в инструментальную музыку" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("audio_ace_step_1_t2a_instrumentals_api.json");
const job = await client.run(wf);
await job.getOutputs("59")[0].toFile("output.png"); // SaveAudioMP3SDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
