Seedance 2.0 Multiframe Stitch
Этот рабочий процесс использует много кредитов! Этот рабочий процесс позволяет создать склеенное многокадровое видео с помощью seedance 2.0. Подходит для быстрого перебора вариантов и создания промежуточных кадров.
О проекте
Seedance 2.0 Multiframe Stitch — это рабочий процесс ComfyUI для генерации плавных промежуточных кадров между двумя ключевыми изображениями и последующей сборки их в видео. В основе — ByteDance2FirstLastFrameNode, который использует модель Seedance 2.0 для синтеза последовательности перехода от первого кадра к последнему. Это удобно для быстрой итерации, изучения движения и быстрого inbetweening без кода и внешних инструментов. Примечание: запуск Seedance 2.0 может активно расходовать кредиты, поэтому заранее планируйте число кадров и разрешение.
Технически рабочий процесс начинается с загрузки стартового и финального изображений через LoadImage. Эти изображения передаются в ByteDance2FirstLastFrameNode для генерации мультикадрового пакета интерполяций. ImageBatch следит за тем, чтобы кадры были корректно сгруппированы для создания видео. GetVideoComponents можно использовать, чтобы задать или подогнать свойства видео (например, частоту кадров), если вы выравниваетесь по референсу. Затем CreateVideo собирает пакет кадров в видеопоток, а SaveVideo записывает результат на диск. На выходе получается цельный переходный клип, построенный полностью из двух статичных кадров.
Полезность здесь — в сочетании управляемости и скорости: вы задаёте опорные кадры, нода интерполирует движение, а остальная часть графа стабильно компилирует и сохраняет выход. Для лучшего результата используйте входные изображения одного разрешения и соотношения сторон, а стоимость контролируйте, уменьшая число кадров, разрешение или итерации, если они доступны в настройках ноды.
Что вы предоставляете
- Чтение рабочего процесса
Работает в ComfyUI. Этот рабочий процесс нельзя запустить на этой странице. Откройте его в Comfy Cloud, где всё уже загружено, или скачайте его для своей ComfyUI.
Попробовать в CloudВнутри рабочего процесса
Предварительный просмотр графа узлов только для чтения. Откройте его в Comfy Cloud или скачайте, чтобы редактировать узлы.
Loading the graph
Open full-size workflow preview- Автор
- ComfyUI
Требуются пользовательские ноды
- Чтение рабочего процесса
Используйте этот рабочий процесс в коде
По возможности генерируется из графа рабочего процесса и входных данных; в противном случае отображаются сохранённые примеры. Перед запуском кода проверьте учётные данные и конечные точки: могут взиматься платежи.
What you need
- Runs on
- Comfy Cloud
- Ключ
- COMFY_API_KEY
- Ваши файлы
- Загружаются кодом по их URL
Требуются платный тариф Cloud и кредиты.
# Python 3.10+: pip install comfy-sdk==0.4.0
import os
from comfy_sdk import Comfy
api_key = os.environ.get("COMFY_API_KEY", "").strip()
if not api_key: raise RuntimeError("Set COMFY_API_KEY")
os.environ.setdefault("COMFY_BASE_URL", "https://cloud.comfy.org")
client = Comfy(api_key=api_key)
workflow = client.workflows.from_json({
"1": {
"class_type": "ByteDance2FirstLastFrameNode",
"inputs": {
"first_frame": [
"3",
0
],
"first_frame_asset_id": "",
"last_frame": [
"4",
0
],
"last_frame_asset_id": "",
"model": "Seedance 2.0",
"model.duration": 4,
"model.generate_audio": False,
"model.prompt": "extreme shot shifts as two character run and jump and make action poses, anime style, squash and stretch animation, calarts style, cartoon network style",
"model.ratio": "16:9",
"model.resolution": "1080p",
"seed": 223429887,
"watermark": False
},
"_meta": {
"title": "ByteDance Seedance 2.5 First-Last-Frame to Video"
}
},
"2": {
"class_type": "SaveVideo",
"inputs": {
"filename_prefix": "video/Seedance2.0_flf2v",
"format": "auto",
"format.codec": "auto",
"video": [
"1",
0
]
},
"_meta": {
"title": "Save Video"
}
},
"3": {
"class_type": "LoadImage",
"inputs": {
"image": "UPLOADED_image_FILENAME"
},
"_meta": {
"title": "Load Image"
}
},
"4": {
"class_type": "LoadImage",
"inputs": {
"image": "UPLOADED_image_2_FILENAME"
},
"_meta": {
"title": "Load Image"
}
},
"5": {
"class_type": "ByteDance2FirstLastFrameNode",
"inputs": {
"first_frame": [
"4",
0
],
"first_frame_asset_id": "",
"last_frame": [
"7",
0
],
"last_frame_asset_id": "",
"model": "Seedance 2.0",
"model.duration": 4,
"model.generate_audio": False,
"model.prompt": "extreme shot shifts as two character run and jump and make action poses, anime style, squash and stretch animation, calarts style, cartoon network style",
"model.ratio": "16:9",
"model.resolution": "1080p",
"seed": 1662723398,
"watermark": False
},
"_meta": {
"title": "ByteDance Seedance 2.5 First-Last-Frame to Video"
}
},
"6": {
"class_type": "SaveVideo",
"inputs": {
"filename_prefix": "video/Seedance2.0_flf2v",
"format": "auto",
"format.codec": "auto",
"video": [
"5",
0
]
},
"_meta": {
"title": "Save Video"
}
},
"7": {
"class_type": "LoadImage",
"inputs": {
"image": "UPLOADED_image_3_FILENAME"
},
"_meta": {
"title": "Load Image"
}
},
"8": {
"class_type": "ByteDance2FirstLastFrameNode",
"inputs": {
"first_frame": [
"7",
0
],
"first_frame_asset_id": "",
"last_frame": [
"10",
0
],
"last_frame_asset_id": "",
"model": "Seedance 2.0",
"model.duration": 4,
"model.generate_audio": False,
"model.prompt": "extreme shot shifts as two character run and jump and make action poses, anime style, squash and stretch animation, calarts style, cartoon network style",
"model.ratio": "16:9",
"model.resolution": "1080p",
"seed": 1366057492,
"watermark": False
},
"_meta": {
"title": "ByteDance Seedance 2.5 First-Last-Frame to Video"
}
},
"9": {
"class_type": "SaveVideo",
"inputs": {
"filename_prefix": "video/Seedance2.0_flf2v",
"format": "auto",
"format.codec": "auto",
"video": [
"8",
0
]
},
"_meta": {
"title": "Save Video"
}
},
"10": {
"class_type": "LoadImage",
"inputs": {
"image": "UPLOADED_image_4_FILENAME"
},
"_meta": {
"title": "Load Image"
}
},
"11": {
"class_type": "ByteDance2FirstLastFrameNode",
"inputs": {
"first_frame": [
"10",
0
],
"first_frame_asset_id": "",
"last_frame": [
"15",
0
],
"last_frame_asset_id": "",
"model": "Seedance 2.0",
"model.duration": 4,
"model.generate_audio": False,
"model.prompt": "extreme shot shifts as two character run and jump and make action poses, anime style, squash and stretch animation, calarts style, cartoon network style",
"model.ratio": "16:9",
"model.resolution": "1080p",
"seed": 651642512,
"watermark": False
},
"_meta": {
"title": "ByteDance Seedance 2.5 First-Last-Frame to Video"
}
},
"12": {
"class_type": "SaveVideo",
"inputs": {
"filename_prefix": "video/Seedance2.0_flf2v",
"format": "auto",
"format.codec": "auto",
"video": [
"11",
0
]
},
"_meta": {
"title": "Save Video"
}
},
"13": {
"class_type": "ByteDance2FirstLastFrameNode",
"inputs": {
"first_frame": [
"15",
0
],
"first_frame_asset_id": "",
"last_frame": [
"16",
0
],
"last_frame_asset_id": "",
"model": "Seedance 2.0",
"model.duration": 4,
"model.generate_audio": False,
"model.prompt": "extreme shot shifts as two character run and jump and make action poses, anime style, squash and stretch animation, calarts style, cartoon network style",
"model.ratio": "16:9",
"model.resolution": "1080p",
"seed": 167021654,
"watermark": False
},
"_meta": {
"title": "ByteDance Seedance 2.5 First-Last-Frame to Video"
}
},
"14": {
"class_type": "SaveVideo",
"inputs": {
"filename_prefix": "video/Seedance2.0_flf2v",
"format": "auto",
"format.codec": "auto",
"video": [
"13",
0
]
},
"_meta": {
"title": "Save Video"
}
},
"15": {
"class_type": "LoadImage",
"inputs": {
"image": "UPLOADED_image_5_FILENAME"
},
"_meta": {
"title": "Load Image"
}
},
"16": {
"class_type": "LoadImage",
"inputs": {
"image": "UPLOADED_image_6_FILENAME"
},
"_meta": {
"title": "Load Image"
}
},
"17": {
"class_type": "ImageBatch",
"inputs": {
"image1": [
"27",
0
],
"image2": [
"26",
0
]
},
"_meta": {
"title": "Batch Images (DEPRECATED)"
}
},
"18": {
"class_type": "ImageBatch",
"inputs": {
"image1": [
"17",
0
],
"image2": [
"25",
0
]
},
"_meta": {
"title": "Batch Images (DEPRECATED)"
}
},
"19": {
"class_type": "ImageBatch",
"inputs": {
"image1": [
"18",
0
],
"image2": [
"24",
0
]
},
"_meta": {
"title": "Batch Images (DEPRECATED)"
}
},
"20": {
"class_type": "ImageBatch",
"inputs": {
"image1": [
"19",
0
],
"image2": [
"23",
0
]
},
"_meta": {
"title": "Batch Images (DEPRECATED)"
}
},
"21": {
"class_type": "CreateVideo",
"inputs": {
"bit_depth": "auto",
"codec": "none",
"color_space": "sRGB",
"fps": 24,
"images": [
"20",
0
]
},
"_meta": {
"title": "Create Video"
}
},
"22": {
"class_type": "SaveVideo",
"inputs": {
"filename_prefix": "video/ComfyUI",
"format": "auto",
"format.codec": "auto",
"video": [
"21",
0
]
},
"_meta": {
"title": "Save Video"
}
},
"23": {
"class_type": "GetVideoComponents",
"inputs": {
"video": [
"13",
0
]
},
"_meta": {
"title": "Get Video Components"
}
},
"24": {
"class_type": "GetVideoComponents",
"inputs": {
"video": [
"11",
0
]
},
"_meta": {
"title": "Get Video Components"
}
},
"25": {
"class_type": "GetVideoComponents",
"inputs": {
"video": [
"8",
0
]
},
"_meta": {
"title": "Get Video Components"
}
},
"26": {
"class_type": "GetVideoComponents",
"inputs": {
"video": [
"5",
0
]
},
"_meta": {
"title": "Get Video Components"
}
},
"27": {
"class_type": "GetVideoComponents",
"inputs": {
"video": [
"1",
0
]
},
"_meta": {
"title": "Get Video Components"
}
}
})
# Replace each example.com URL with a public URL of your file.
workflow.set_input("3", "image", client.assets.from_url("https://example.com/replace-with-a-url/image"))
workflow.set_input("4", "image", client.assets.from_url("https://example.com/replace-with-a-url/image_2"))
workflow.set_input("7", "image", client.assets.from_url("https://example.com/replace-with-a-url/image_3"))
workflow.set_input("10", "image", client.assets.from_url("https://example.com/replace-with-a-url/image_4"))
workflow.set_input("15", "image", client.assets.from_url("https://example.com/replace-with-a-url/image_5"))
workflow.set_input("16", "image", client.assets.from_url("https://example.com/replace-with-a-url/image_6"))
# run() also passes api_key to the partner nodes in this workflow.
job = client.run(workflow, api_key=api_key)Вопросы и ответы
Она использует модель Seedance 2.0 для генерации промежуточных кадров по первому и последнему изображению. Выход — это мультикадровый пакет, который плавно переходит между двумя входами.
Вывод Seedance 2.0 может быть ресурсоёмким. Расход кредитов масштабируется с числом кадров, разрешением и настройками качества. Чтобы снизить стоимость, уменьшите число промежуточных кадров, снизьте выходное разрешение или уменьшите качество/итерации, если такие параметры доступны.
Важны два фактора: число сгенерированных кадров и FPS, используемый в CreateVideo. Больше кадров или выше FPS дают более длинные/плавные клипы. Используйте GetVideoComponents, чтобы совпасть с FPS референса, или задайте FPS вручную в CreateVideo.
Используйте стартовое и финальное изображения с одинаковым кадрированием, светом и масштабом объекта. Держите одинаковые разрешение/соотношение сторон. Если нода предоставляет seed или параметр strength/smoothness, попробуйте зафиксировать seed для повторяемости и настроить strength в сторону более консервативного движения.