LTX-2.3: Görsel Sesden Videoya

LTX-2.3 kullanarak senkronize dudak hareketleriyle yüksek kaliteli bir video oluşturmak için bir görsel ve bir ses dosyası yükleyin.

Input

Speech, singing or sound the video is synced to.

  • 0:00 / 0:00

The first frame; the person in it speaks the audio.

Describe the scene and how it moves. A Gemma prompt enhancer expands it before generation.

Match the audio length.

Pixels, a multiple of 16.

Pixels, a multiple of 16.

Advanced settings

What to avoid.

Leave empty for a new result each run. Enter a number to repeat one.

Output
00:00
Example

Bir örnek deneyin

Bu iş akışı hakkında

Bu ComfyUI iş akışı, tek bir görüntü ve bir ses kaydını LTX-2.3 modelini kullanarak dudak senkronlu konuşan bir videoya dönüştürür. LoadImage ile bir portre yüklersin ve konuşmayı LoadAudio ile sağlarsın veya RecordAudio ile canlı yakalarsın. Her iki akış da LTX-2.3 üretici düğümüne (98ee9e5b-467b-40aa-a534-36033f27d0b4) gider; düğüm, sesle zamanlı şekilde konuşan bir konu içeren kare dizisi sentezler. Oluşturulan kareler SaveVideo ile MP4 olarak kodlanır.

Altyapıda LTX-2.3, referans görüntünden görsel kimliği ve sağlanan sesin zamansal özelliklerini koşullandırma olarak kullanarak ağız şekillerini ve zaman içindeki ince yüz hareketlerini sürer. Düğüm genelde çıktı çözünürlüğü ve FPS gibi ayarlar sunar; birçok kurulumda tekrarlanabilirlik için seed ve hareketi veya stili yönlendirmek üzere isteğe bağlı bir metin istemi de bulunur. Grafikteki MarkdownNote, hızlı ipuçlarını ve gerekli ağırlıkları indirebilmen için resmi Lightricks model depolarına bağlantıları belgeler.

Sorular ve yanıtlar