Comment obtenir les masques les plus précis à partir d’une invite texte ?

Soyez spécifique et descriptif. Ajoutez des attributs distinctifs comme la couleur, le vêtement ou le type d’objet (ex : « berline rouge » au lieu de « voiture »). Si plusieurs objets similaires apparaissent, affinez encore l’invite (ex : « personne en veste bleue » vs « personne »).

Peut-on suivre plusieurs instances et garder des IDs stables ?

Oui. Le nœud SAM3 Video Masking trouve toutes les instances correspondant à l’invite et les suit avec des IDs stables à travers les images. Si vous ne souhaitez qu’une instance, rendez l’invite plus précise ou filtrez par ID en post-production avec le flux de masque brut.

Ça fonctionne sur quelques images mais c’est lent sur toute la vidéo. Des conseils ?

Utilisez frame_load_cap pour itérer rapidement, puis passez à 0 pour l’export final. Réduire la résolution d’entrée ou couper le clip peut accélérer le traitement. L’utilisation d’un GPU avec suffisamment de VRAM est recommandée pour une réactivité en temps réel.

Que dois-je exporter pour le compositing dans un autre éditeur ?

Exportez le masque brut (comme matte vidéo) et le détourage du sujet. Dans votre logiciel de montage ou VFX, utilisez le masque comme matte luma/alpha, ou placez directement le détourage sur votre fond pour un compositing précis.

SAM3 – Masquage Vidéo par Invite Texte

Ce workflow ComfyUI effectue un masquage automatique d’objets vidéo à partir d’une simple phrase grâce au nœud SAM3 Video Masking (ID : 9cea40bb-b0cf-4b40-a758-8935cfe8d52f). Vous chargez un clip avec VHS_LoadVideo, décrivez ce que vous souhaitez isoler (par exemple « voiture rouge » ou « personne ») dans le champ mask_prompt du nœud, et le système trouve chaque instance correspondante, les suit à travers les images avec des IDs stables, et produit trois flux : un aperçu overlay du masque, un masque binaire brut par image, et un détourage du sujet. Les nœuds SaveVideo gèrent l’export des résultats.

Techniquement, VHS_LoadVideo fournit une séquence d’images cohérente (fps, résolution) pour l’inférence. Pendant l’itération, vous pouvez limiter le nombre d’images avec frame_load_cap pour prévisualiser rapidement, puis passer à un traitement complet en le réglant à 0. Le nœud SAM3 Video Masking interprète votre invite texte, segmente la cible à travers les images et maintient la continuité d’identité pour éviter le scintillement ou l’inversion des objets. Les sorties sont adaptées au compositing, floutage sélectif, étalonnage couleur ou remplacement d’arrière-plan. Un nœud MarkdownNote dans le graphe fournit des astuces et rappels pendant le travail.

API

Utiliser ce workflow depuis le code

Chaque workflow Comfy est un graphe JSON. Le contenu ci-dessous est ce workflow, exactement comme ComfyUI l’exécute — récupérez-le depuis l’URL, gardez-le dans le contrôle de version, ou chargez-le dans ComfyUI et exécutez-le nœud par nœud.

4d7abcb8e25d.json

Récupération du JSON du workflow…

Exécutez-le depuis TypeScript ou Python avec le Comfy SDK. Le même code cible Comfy Cloud ou un ComfyUI auto-hébergé — seule l’URL de base change.

// Install (beta)
npm i @comfyorg/sdk

// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";

const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");

Le SDK prend un workflow au format API : ouvrez ce workflow dans ComfyUI et utilisez Fichier → Exporter le workflow (API).

L’accès à l’API Comfy Cloud nécessite un forfait avec clé API.

Docs SDK Obtenir une clé API

FAQ

Questions Fréquentes