このワークフローは、1枚の画像からテキストから音楽生成（ACE Step 1.5 XL Turbo）と画像から動画アニメーション（LTX 2.3）を組み合わせ、Audio‑Reactive LoRAで音楽に反応する動画を作成します。画像と短いクリエイティブブリーフを入力すると、GeminiNodeがビジュアル用「スタイルタグ」と楽曲用「歌詞」を一括生成。RegexExtractノードでテキストを'---'で分割し、前半をLTX 2.3のスタイルタグ、後半をACE Step 1.5 XL Turboの歌詞として使います。生成された楽曲はSaveAudioMP3で保存され、その音声が動画の動きに反映され、SaveVideoで動画を保存します。
技術的には、画像読み込み、ACE Step 1.5プロンプト作成、Audio‑Reactive LoRAプロンプト作成、Regex抽出、ACE Step 1.5 XL、LTX 2.3＋Audio‑Reactive LoRAのグループで構成。Audio‑Reactive LoRA（モデルカード参照）は音楽に合わせた動きを追加し、強度は1.0～2.0（1.4以上で強め）で調整可能。PreviewAnyで中間出力（プロンプト・音声・フレーム）を確認し、MarkdownNoteにクイックヒントを記載。スタイルタグや歌詞を調整し、楽曲・動画を再生成して理想のクリエイティブに仕上げる反復が容易です。
API
このワークフローをコードから利用
すべてのComfyワークフローはJSONグラフです。以下のペイロードは、このワークフローそのものであり、ComfyUIが実行する内容と同じです — このURLから取得し、バージョン管理に保存したり、ComfyUIで読み込んでノードごとに実行できます。
Comfy SDKを使ってTypeScriptまたはPythonから実行できます。同じコードでComfy Cloudや自身でホストしたComfyUIのどちらにも対応 — ベースURLだけが異なります。
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");SDKはAPI形式のワークフローを受け取ります：このワークフローをComfyUIで開き、「ファイル → ワークフローをエクスポート（API）」を使用してください。
FAQ
