Рабочий процесс LivePortrait for Facial Expression — это продвинутый инструмент для анимации статичного портрета путём переноса мимики из референсного видео. Этот рабочий процесс использует модель LivePortrait, которая хорошо справляется с переносом выражений лица из видео в изображение. Процесс начинается с ноды «LoadImage», куда загружается статичный портрет, и ноды «VHS_LoadVideo», которая импортирует референсное видео с нужными выражениями. Ключевую роль играет нода «LivePortraitProcess»: она анализирует и извлекает движения лица из видео, после чего они применяются к портрету через ноду «LivePortraitComposite». Для точности используются ноды «LivePortraitCropper» и «LivePortraitLoadMediaPipeCropper», которые выравнивают черты лица. Финальное анимированное видео собирается нодой «VHS_VideoCombine» и сохраняется нодой «SaveImage».
Этот рабочий процесс полезен для создания динамичных анимаций из статичных изображений и подходит создателям контента и маркетологам, которым нужно усилить визуальный сторителлинг. Используя ноды вроде «DownloadAndLoadLivePortraitModels» и «ImageResizeKJv2», вы можете убедиться, что модели и изображения оптимизированы для лучшей производительности и качества. Интеграция с пользовательскими нодами, такими как «comfyui-kjnodes» и «comfyui-liveportraitkj», дополнительно повышает способность рабочего процесса выдавать реалистичные и выразительные анимации.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");SDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
