LivePortrait для мимики лица
Загрузите портрет и референсное видео с выражениями. Сгенерируйте видео, где портрет повторяет мимику из референса.
О проекте
Рабочий процесс LivePortrait for Facial Expression — это продвинутый инструмент для анимации статичного портрета путём переноса мимики из референсного видео. Этот рабочий процесс использует модель LivePortrait, которая хорошо справляется с переносом выражений лица из видео в изображение. Процесс начинается с ноды «LoadImage», куда загружается статичный портрет, и ноды «VHS_LoadVideo», которая импортирует референсное видео с нужными выражениями. Ключевую роль играет нода «LivePortraitProcess»: она анализирует и извлекает движения лица из видео, после чего они применяются к портрету через ноду «LivePortraitComposite». Для точности используются ноды «LivePortraitCropper» и «LivePortraitLoadMediaPipeCropper», которые выравнивают черты лица. Финальное анимированное видео собирается нодой «VHS_VideoCombine» и сохраняется нодой «SaveImage».
Что вы предоставляете
- Чтение рабочего процесса
Работает в ComfyUI. Этот рабочий процесс нельзя запустить на этой странице. Откройте его в Comfy Cloud, где всё уже загружено, или скачайте его для своей ComfyUI.
Попробовать в CloudДля этого рабочего процесса пока нет примеров результатов.
Вопросы и ответы
Лучше всего подходят портреты высокого разрешения с чёткими чертами лица — так перенос выражений будет точнее.
Да, если на видео хорошо видна мимика, его можно использовать для переноса выражений на портрет.
Убедитесь, что и портрет, и видео хорошо освещены и имеют высокое качество. Корректное выравнивание с помощью нод кадрирования также помогает сделать анимацию плавнее.
Да, рабочий процесс рассчитан на получение качественных анимаций, подходящих для коммерческого использования, например в маркетинге и рекламе.