Этот рабочий процесс ComfyUI предназначен для преобразования видеоматериала в темпорально стабильную карту глубины с помощью продвинутых AI-моделей. В основе рабочий процесс использует модель Depth Anything v2, которая хорошо подходит для получения точных карт глубины из видео. Процесс начинается с ноды VHS_LoadVideo, позволяющей импортировать видеофайлы в рабочий процесс. Затем нода DepthAnything_V2 обрабатывает каждый кадр видео, создавая карту глубины, которая сохраняет темпоральную согласованность между кадрами. Это критично для задач, где нужны плавные переходы и стабильность, например в дополненной реальности или проектах 3D-реконструкции.
Также рабочий процесс включает ноды VHS_VideoCombine и VHS_VideoInfo, которые упрощают интеграцию и управление видеоданными в среде ComfyUI. Пользовательские ноды comfyui-videohelpersuite и comfyui_controlnet_aux расширяют возможности по обработке видео-специфичных задач и управлению параметрами. Используя эти ноды, вы можете получать качественные карты глубины, готовые для дальнейшей обработки или интеграции в разные приложения. Этот рабочий процесс особенно полезен специалистам в областях VR, игр и кинопроизводства, где информация о глубине заметно повышает реализм и интерактивность цифрового содержимого.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "Видео в карту глубины" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("utility-depthAnything-v2-relative-video_api.json");
const job = await client.run(wf);
await job.getOutputs("7")[0].toFile("output.png"); // VHS_VideoCombineSDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
