Рабочий процесс «Chatter Box: Voice Cloning Audio Conversion» предназначен для преобразования аудиоклипа в другой голос при сохранении исходного тайминга и характеристик исполнения. Это достигается с помощью модели Chatter Box, которая специализируется на клонировании голоса. Рабочий процесс начинается с ноды «LoadAudio», которая импортирует исходный аудиоклип, который вы хотите конвертировать. Затем короткий референс-клип целевого голоса обрабатывается нодой «FL_ChatterboxVC», выполняющей преобразование голоса. Эта нода ключевая: она анализирует особенности целевого голоса и переносит их на исходное аудио, обеспечивая сохранение тайминга и эмоциональных нюансов оригинала.
Также в рабочем процессе есть нода «AudioCrop», которая позволяет обрезать аудио до нужной длины, чтобы обрабатывались только релевантные фрагменты. Наконец, нода «SaveAudioMP3» экспортирует конвертированное аудио в формате MP3, что упрощает обмен и использование на разных платформах. Ноды «MarkdownNote» помогают документировать процесс и дают подсказки прямо внутри рабочего процесса. Эта схема особенно полезна для дубляжа, создания контента и персонализированных озвучек, где важно сохранять целостность исходного исполнения.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "Chatter Box: Преобразование аудио путем клонирования голоса" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("audio-chatterbox_vc_api.json");
const job = await client.run(wf);
await job.getOutputs("4")[0].toFile("output.png"); // SaveAudioMP3SDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
