Este fluxo de trabalho ComfyUI transforma uma imagem estática em um vídeo curto e dinâmico usando o modelo de imagem para vídeo Gen4 Turbo da Runway. Ele conecta quatro nós: LoadImage para trazer sua imagem para o grafo, RunwayImageToVideoNodeGen4 para chamar a API Gen4 Turbo hospedada e sintetizar movimento ao longo do tempo, SaveVideo para codificar o resultado em um arquivo de vídeo padrão, e um MarkdownNote com links e orientações de configuração. Como o processamento pesado ocorre no nó parceiro da Runway, o fluxo permanece leve e rápido na sua máquina local.
Tecnicamente, o nó LoadImage fornece os pixels para o RunwayImageToVideoNodeGen4, que envia a imagem (e suas configurações como duração e FPS) para a API da Runway. A API retorna um vídeo compatível com o nó SaveVideo do ComfyUI, que codifica o clipe final (ex: MP4) na taxa de quadros escolhida. O nó parceiro usa HTTPS e requer configuração de rede segura conforme indicado nas Notas do Autor (ver "Sobre o Nó de API"): execute a partir de localhost/127.0.0.1 e garanta que HTTPS de saída esteja liberado. O resultado é um pipeline limpo e reproduzível de imagem para vídeo, fácil de iterar: troque a imagem de entrada, ajuste parâmetros de movimento/duração e execute novamente para explorar diferentes visuais.
API
Use este workflow a partir do código
Todo workflow Comfy é um grafo JSON. O payload abaixo é este workflow, exatamente como o ComfyUI executa — obtenha-o pela URL, mantenha-o no controle de versão ou carregue-o no ComfyUI e execute nó por nó.
Execute a partir de TypeScript ou Python com o Comfy SDK. O mesmo código serve para o Comfy Cloud ou um ComfyUI hospedado por você — apenas a URL base muda.
// Install (beta)
npm i @comfyorg/sdk
// Run "Runway: Gen4 Turbo Imagem para Vídeo" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_runway_gen4_turo_image_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("4", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("6")[0].toFile("output.png"); // SaveVideoO SDK utiliza um workflow no formato API: abra este workflow no ComfyUI e use Arquivo → Exportar Workflow (API).
O acesso à API do Comfy Cloud requer um plano com chave de API.
FAQ
