تم تصميم سير عمل ComfyUI هذا لإنشاء فيديو مزامنة شفاه عبر دمج صورة شخصية ثابتة مع ملف صوتي. بالاستفادة من قدرات نموذج Wan2.1 InfiniteTalk، يحلل سير العمل الصوت المرفوع لتوليد حركات فم تتوافق مع الكلمات المنطوقة، ما ينتج تأثير مزامنة شفاه واقعي. تبدأ العملية بعقدة 'LoadAudio' التي تستوعب الملف الصوتي وتجهزه للتحليل. وفي الوقت نفسه، تتيح عقدة 'LoadImage' للمستخدمين رفع صورة الشخصية التي سيتم تحريكها. يستفيد سير العمل من عقد مخصصة مثل 'ComfyUI-WanVideoWrapper' و'audio-separation-nodes-comfyui' لمعالجة الصوت ومزامنته مع العناصر المرئية. المخرَج النهائي هو ملف فيديو يتم حفظه عبر عقدة 'SaveVideo' بحيث تكون حركات فم الشخصية متزامنة تمامًا مع المسار الصوتي.
تقنيًا، يتفوق هذا سير العمل عبر استخدام أساليب متقدمة لتحليل الصوت وتوليد الفيديو. تعد عقدة 'audio-separation-nodes-comfyui' أساسية لتقسيم الصوت إلى مكونات يمكن ربطها بأشكال فم محددة، بينما تتولى 'comfyui-kjnodes' المهمة الدقيقة لدمج هذه الحركات داخل صورة الشخصية. يُعد هذا سير العمل مفيدًا بشكل خاص لمنشئي المحتوى الذين يرغبون في إنتاج فيديوهات متحركة دون الحاجة إلى برامج تحريك معقدة، ما يجعله أداة سهلة الوصول لتعزيز السرد وزيادة التفاعل عبر الوسائط المرئية.
API
استخدم سير العمل هذا من الكود
كل سير عمل في Comfy هو رسم بياني بصيغة JSON. الحمولة أدناه هي هذا سير العمل بالضبط كما يشغله ComfyUI — يمكنك جلبه من الرابط، حفظه في نظام التحكم بالإصدارات، أو تحميله في ComfyUI وتشغيله عقدة تلو الأخرى.
شغّله من TypeScript أو Python باستخدام Comfy SDK. نفس الكود يعمل على Comfy Cloud أو ComfyUI الذي تستضيفه بنفسك — فقط عنوان URL الأساسي يتغير.
// Install (beta)
npm i @comfyorg/sdk
// Run "فيديو مزامنة شفاه الشخصية مدفوع بالصوت" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("templates-wan2_1_infinitetalk_music_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("284", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("325")[0].toFile("output.png"); // SaveVideoيأخذ SDK سير العمل بصيغة API: افتح هذا سير العمل في ComfyUI واستخدم ملف → تصدير سير العمل (API).
يتطلب الوصول إلى Comfy Cloud API خطة تتضمن مفتاح API.
الأسئلة الشائعة
