HuMo Генерация Видео

Генерация видео на основе аудио, изображения и текста с сохранением синхронизации губ персонажа.

О проекте

Рабочий процесс HuMo Video Generation предназначен для создания качественных видео, в которых движения губ персонажа синхронизированы с аудиовходом. Он использует модель HuMo, специально адаптированную под генерацию видео с акцентом на людей. Благодаря интеграции разных типов входных данных — текста, изображений и аудио — можно получать богатый и настраиваемый результат. В основе рабочего процесса — ноды CLIPTextEncode для обработки текста, LoadImage для референсного изображения и AudioEncoderEncode для аудио. Они объединяются с видео-нодами, такими как CreateVideo и SaveVideo, чтобы получить финальный результат. Нода WanHuMoImageToVideo особенно важна: она связывает статичные изображения с генерацией динамического видео и следит за тем, чтобы движения губ совпадали с аудиодорожкой. Этот рабочий процесс подходит для задач, где важны точный липсинк и возможность настраивать визуальную часть.

Что вы предоставляете

  • Чтение рабочего процесса

Работает в ComfyUI. Этот рабочий процесс нельзя запустить на этой странице. Откройте его в Comfy Cloud, где всё уже загружено, или скачайте его для своей ComfyUI.

Попробовать в Cloud
Вывод
ПримерSample output
Sample output

Вопросы и ответы