Sora 2: из текста и изображения в видео

Генерация видео OpenAI Sora-2 и Sora-2 Pro с синхронизированным аудио.

О проекте

Этот рабочий процесс ComfyUI демонстрирует сквозную генерацию «текст- и изображение-в-видео» с помощью ноды OpenAIVideoSora2, с опциональным синхронизированным аудио. Вы можете начать только с текстового промпта или задать условие по видео с помощью эталонного изображения, загруженного через LoadImage. Поскольку Sora-2 и Sora-2 Pro ожидают фиксированные входные размеры, рабочий процесс предлагает две ветки, чтобы подогнать изображение: вариант 1 использует ResizeAndPadImage, чтобы добавить поля без обрезки, а вариант 2 обрезает изображение, заполняя кадр. PreviewImage позволяет проверить кадрирование перед вызовом API, а SaveVideo записывает возвращённое видео на диск.

Что вы предоставляете

  • Чтение рабочего процесса

Работает в ComfyUI. Этот рабочий процесс нельзя запустить на этой странице. Откройте его в Comfy Cloud, где всё уже загружено, или скачайте его для своей ComfyUI.

Попробовать в Cloud
Вывод
ПримерSample output
Sample output

Вопросы и ответы