SVD 文生图到图生视频

在 ComfyUI 中,“SVD 文本生成图像再转视频”工作流可将文本描述转化为动态视频内容。流程首先通过 CLIPTextEncode 等节点将文本编码为图像生成模型可识别的格式,利用 SVD 和 Stability 等强大模型生成高质量图像。生成图像后,工作流通过 SVD_img2vid_Conditioning 和 VideoLinearCFGGuidance 等节点,将静态图像转化为流畅的视频序列。该工作流特别适合希望通过简单文本输入制作视频内容的创作者,无需复杂的视频编辑技能。

在技术实现上,工作流结构优化了图像和视频的质量与连贯性。KSampler 节点在采样潜空间时起关键作用,生成多样且富有创意的输出,VAEDecode 节点将潜在表示解码为可见图像。CreateVideo 节点将这些图像编排为无缝视频,可通过 PreviewImage 预览并用 SaveVideo 节点保存。该方法高效且支持高度自定义和创意,非常适合艺术家和市场营销人员使用。

API

通过代码使用此工作流

每个 Comfy 工作流都是一个 JSON 图。下面的内容就是此工作流的完整数据,ComfyUI 运行时也是如此——你可以从该 URL 获取、放入版本控制,或在 ComfyUI 中加载并逐节点运行。

txt_to_image_to_video.json
正在获取工作流 JSON…

使用 Comfy SDK 从 TypeScript 或 Python 运行。相同代码可用于 Comfy Cloud 或你自托管的 ComfyUI——只需更改基础 URL。

// Install (beta)
npm i @comfyorg/sdk

// Run "SVD 文生图到图生视频" (TypeScript)
import { Comfy } from "@comfyorg/sdk";

const client = new Comfy({ apiKey: "comfyui-..." });

// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("txt_to_image_to_video_api.json");

wf.setInput("18", "text", "photograph beautiful scenery nature mountains alps river rapids snow sky cumulus clouds"); // CLIPTextEncode

const job = await client.run(wf);
await job.getOutputs("24")[0].toFile("output.png"); // SaveVideo

SDK 需要 API 格式的工作流:在 ComfyUI 中打开此工作流,使用 文件 → 导出工作流(API)。

Comfy Cloud API 访问需要包含 API 密钥的套餐。

常见问题

常见问题

查看所有工作流
Showing 30 of 30 templates