이 ComfyUI 워크플로는 Grok 모델을 사용해 최대 15초 길이의 짧은 비디오를 생성하며, 오디오 트랙을 자동으로 동기화합니다. 핵심은 GrokVideoNode로, 순수 텍스트 프롬프트(텍스트에서 비디오로) 또는 LoadImage의 시작 프레임(이미지에서 비디오로) 중 하나를 입력으로 받을 수 있습니다. 이 노드는 추론을 처리하고, 모델이 생성한 오디오와 비주얼을 함께 담은 저장 준비된 비디오 클립을 반환합니다. 이후 SaveVideo가 결과를 표준 비디오 파일로 디스크에 저장하며, 포함된 오디오가 있을 경우 이를 유지합니다.
기술적으로 워크플로는 최소 구성으로 직관적입니다. LoadImage(선택 사항)가 초기 프레임을 GrokVideoNode에 전달하고, GrokVideoNode가 프롬프트 및/또는 참조 이미지로부터 모션과 사운드트랙을 합성한 뒤, SaveVideo가 출력을 파일로 저장합니다. 재생 시간을 15초로 제한하면 생성 응답성이 좋아지고 모델의 성능 범위 내에서 동작합니다. 결과적으로 ComfyUI를 벗어나지 않고도 빠른 콘셉트 제작, 정지 이미지 애니메이션, 소셜 미디어용 짧은 클립 제작에 실용적인 파이프라인이 됩니다.
API
코드에서 이 워크플로우 사용하기
모든 Comfy 워크플로우는 JSON 그래프입니다. 아래 페이로드는 이 워크플로우 그 자체로, ComfyUI에서 실행되는 것과 동일합니다 — URL에서 가져오거나, 버전 관리에 보관하거나, ComfyUI에서 불러와 노드별로 실행할 수 있습니다.
Comfy SDK로 TypeScript 또는 Python에서 실행하세요. 동일한 코드는 Comfy Cloud 또는 직접 호스팅하는 ComfyUI 모두에 적용됩니다 — 기본 URL만 다릅니다.
// Install (beta)
npm i @comfyorg/sdk
// Run "Grok：비디오 생성" (TypeScript)
import { Comfy } from "@comfyorg/sdk";
const client = new Comfy({ apiKey: "comfyui-..." });
// This workflow, exported in API format (see note below)
const wf = await client.workflows.fromFile("api_grok_video_api.json");
const asset = client.assets.fromFile("input.png");
wf.setInput("3", "image", asset); // LoadImage
const job = await client.run(wf);
await job.getOutputs("2")[0].toFile("output.png"); // SaveVideoSDK는 API 형식의 워크플로우를 사용합니다: 이 워크플로우를 ComfyUI에서 열고 파일 → 워크플로우 내보내기(API)를 사용하세요.
FAQ
