Este fluxo de trabalho demonstra a geração reference-to-video do MiniMax H3 no ComfyUI: você fornece um prompt de texto mais até nove imagens de referência, três vídeos curtos de referência e três clipes de áudio, e o modelo produz um único MP4 com áudio estéreo nativo em uma única passada. O nó MiniMaxH3ReferenceToVideo é o núcleo, combinando contexto multimodal (identidade, movimento, câmera, estilo e voz) com seu prompt para sintetizar um clipe de ~15s em até 2K de resolução e 24fps.
Por baixo do capô, o grupo Switch Model and Settings carrega a pilha de modelos MiniMax H3 via UNETLoader e CLIPLoader, enquanto KSamplerSelect, BasicScheduler, SamplerCustomAdvanced e BasicGuider gerenciam o comportamento de amostragem (com seed definido por RandomNoise para reprodutibilidade). ResolutionSelector define um tamanho 16:9 alinhado a múltiplos de 32, e ComfyMathExpression com PrimitiveFloat calcula valores derivados como contagem de frames a partir da duração e fps. Após a geração, VAELoader fornece os VAEs de vídeo e áudio; VAEDecode reconstrói os frames a partir dos latentes de vídeo e VAEDecodeAudio reconstrói as formas de onda estéreo. CreateVideo multiplexa frames e áudio, e SaveVideo grava o MP4 final. Isso torna o fluxo de trabalho prático para animação com consistência de personagem, movimento guiado por estilo e conteúdo sincronizado com áudio sem etapas separadas de TTS ou sound design.
API
Use este workflow a partir do código
Todo workflow Comfy é um grafo JSON. O payload abaixo é este workflow, exatamente como o ComfyUI executa — obtenha-o pela URL, mantenha-o no controle de versão ou carregue-o no ComfyUI e execute nó por nó.
Execute a partir de TypeScript ou Python com o Comfy SDK. O mesmo código serve para o Comfy Cloud ou um ComfyUI hospedado por você — apenas a URL base muda.
// Install (beta)
npm i @comfyorg/sdk
// Run this workflow (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
const wf = await client.workflows.fromFile("workflow_api.json");
const job = await client.run(wf);
await job.getOutputs("<output-node-id>")[0].toFile("output.png");O SDK utiliza um workflow no formato API: abra este workflow no ComfyUI e use Arquivo → Exportar Workflow (API).
O acesso à API do Comfy Cloud requer um plano com chave de API.
FAQ
