Этот рабочий процесс ComfyUI превращает одно статичное изображение в короткое динамичное видео с помощью модели Runway Gen4 Turbo для image-to-video. Он связывает четыре ноды: LoadImage для загрузки исходного изображения в граф, RunwayImageToVideoNodeGen4 для вызова размещённого API Gen4 Turbo и синтеза движения во времени, SaveVideo для кодирования результата в стандартный видеофайл и MarkdownNote со ссылками и подсказками по настройке. Так как основная обработка выполняется через партнёрскую ноду Runway, рабочий процесс остаётся лёгким и быстро работает на локальной машине.
Технически нода LoadImage передаёт пиксельные данные в RunwayImageToVideoNodeGen4, которая отправляет изображение (и выбранные настройки, такие как длительность и частота кадров) в Runway API. API возвращает сгенерированный поток видео, совместимый с нодой SaveVideo в ComfyUI, которая кодирует финальный клип (например, MP4) с выбранным FPS. Партнёрская нода использует HTTPS и требует безопасной сетевой настройки, указанной в Author Notes (см. «About API Node»): запускать с localhost/127.0.0.1 и убедиться, что исходящий HTTPS разрешён. В итоге получается чистый, воспроизводимый пайплайн image-to-video, который легко итеративно улучшать: меняйте входное изображение, настраивайте движение/длительность и перезапускайте, чтобы сравнивать разные варианты.
API
Использовать этот рабочий процесс из кода
Каждый рабочий процесс Comfy — это JSON-граф. Ниже представлен payload этого процесса, точно так же, как его запускает ComfyUI: получите его по ссылке, храните в системе контроля версий или загрузите в ComfyUI и выполняйте по узлам.
Запустите его на TypeScript или Python с помощью Comfy SDK. Один и тот же код работает с Comfy Cloud или вашим собственным ComfyUI — меняется только базовый URL.
// Install (beta)
npm i @comfyorg/sdk
// Run "Runway: Gen4 Turbo Изображение в видео" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_runway_gen4_turo_image_to_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("4", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("6")[0].toFile("output.png"); // SaveVideoSDK принимает рабочий процесс в API-формате: откройте этот процесс в ComfyUI и используйте Файл → Экспортировать рабочий процесс (API).
Доступ к API Comfy Cloud требует плана с API-ключом.
FAQ
