Ses Tabanlı Karakter Dudak Senkronizasyonu Videosu

Bir karakter görseli ve bir ses dosyası yükleyin. Karakterin ağız hareketlerinin sağlanan ses parçasıyla eşleştiği dudak senkronizasyonu videosu oluşturun.

Input

Speech or singing the character lip-syncs to.

  • 0:00 / 0:00

One person, face clearly visible. Cropped to the width × height below.

Describe the performance: expression, head and body movement, camera.

Pixels, a multiple of 16.

Frames at 25 fps: set it to audio seconds × 25 (the graph can't read the audio length). The example's 17.6 s clip used 440.

Default: 440

Pixels, a multiple of 16.

Advanced settings

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

Default: 7

Output
00:00
Example

Bir örnek deneyin

Bu iş akışı hakkında

Bu ComfyUI iş akışı, statik bir karakter görseli ile bir ses dosyasını birleştirerek dudak senkronizasyonlu bir video oluşturmak için tasarlanmıştır. Wan2.1 InfiniteTalk modelinin gücünden yararlanan iş akışı, yüklenen sesi analiz ederek konuşulan kelimelerle uyumlu ağız hareketleri üretir ve gerçekçi bir dudak senkronizasyonu sağlar. Süreç, ses dosyasını içe aktaran 'LoadAudio' düğümüyle başlar. Aynı anda, karakter görselini yüklemek için 'LoadImage' düğümü kullanılır. İş akışı, sesi işleyip görsel öğelerle senkronize etmek için 'ComfyUI-WanVideoWrapper' ve 'audio-separation-nodes-comfyui' gibi özel düğümlerden yararlanır. Son çıktı, karakterin ağız hareketlerinin sesle tam uyumlu olduğu bir video dosyasıdır ve 'SaveVideo' düğümüyle kaydedilir.

Teknik olarak, bu iş akışı gelişmiş ses analizi ve video üretim teknikleriyle öne çıkar. 'audio-separation-nodes-comfyui' düğümü, sesi belirli ağız şekillerine eşlenebilecek bileşenlere ayırmada kritik rol oynar; 'comfyui-kjnodes' ise bu hareketlerin karakter görseline entegre edilmesini sağlar. Bu iş akışı, karmaşık animasyon yazılımlarına ihtiyaç duymadan animasyonlu videolar üretmek isteyen içerik üreticileri için erişilebilir bir araçtır ve hikaye anlatımını görsel medya ile güçlendirmek için idealdir.

Sorular ve yanıtlar