SpaceXAI: Grok Imagine Video

SpaceXAI: Grok Imagine Video는 xAI의 비디오 생성 모델입니다. 비디오 카테고리에 속하며, 텍스트와 이미지 입력을 짧은 비디오 클립으로 변환하도록 만들어졌습니다. 텍스트나 정지 이미지가 아니라 생성된 움직임이 필요한 파이프라인을 위해 모델을 평가하고 있다면, 이것이 고려해 볼 만한 종류의 모델이며, Grok 제품군을 만든 것과 같은 제공업체에서 나옵니다.

입력 측면에서 이 모델은 텍스트와 이미지를 받습니다. 출력 측면에서는 비디오를 생성합니다. 제공업체는 이를 빠르고 텍스트, 이미지, 레퍼런스 조건화가 가능하다고 설명하는데, 이는 작성된 프롬프트, 이미지, 또는 둘의 조합으로 생성을 이끌 수 있다는 뜻입니다. 출력 클립은 24 frames per second로 1초에서 15초까지이며, 480p 또는 720p입니다. 일곱 가지 화면 비율을 사용할 수 있습니다: 16:9, 9:16, 1:1, 4:3, 3:4, 3:2, 2:3. first_frame 이미지를 제공할 수 있으며, 이를 통해 클립의 시작 부분을 특정 정지 이미지에 고정할 수 있습니다. 이 모델에는 컨텍스트 길이가 명시되어 있지 않으므로, 프롬프트를 긴 대화형 컨텍스트가 아니라 생성 지시로 취급하십시오.

이러한 기능들은 상당히 구체적인 용도 집합을 가리킵니다. 9:16의 짧은 세로 클립은 소셜 형식에 적합하고, 16:9와 더 넓은 비율은 가로 재생에 맞습니다. 길이가 최대 15초이므로, 이 모델은 장편 서사 비디오보다는 단일 샷 시퀀스, 애니메이션 정지 이미지, 제품 또는 장면 미리보기, 빠른 콘셉트 시각화에 자연스럽게 맞습니다. first_frame 이미지를 제공하는 것은 기존 아트워크, 스토리보드 패널, 사진과의 연속성이 필요할 때 유용하며, 다양한 화면 비율 덕분에 같은 프롬프트를 처음부터 다시 생성하지 않고도 여러 배치에 맞게 조정할 수 있습니다.

모델 id "x-ai/grok-imagine-video"를 사용해 api14의 OpenAI-compatible API를 통해 모델을 호출합니다. 지원되는 요청 파라미터는 logprobs, max_tokens, response_format, seed, temperature, top_logprobs, top_p입니다. seed 파라미터는 비디오 작업에서 주목할 만한데, 프롬프트를 반복 조정할 때 실행을 재현 가능하게 만드는 방법을 제공하기 때문입니다. temperature와 top_p는 샘플링을 제어하고, logprob 관련 파라미터를 사용하면 엔드포인트가 반환하는 경우 토큰 수준 가능도를 검사할 수 있습니다. 인터페이스가 OpenAI-compatible이므로 기존 클라이언트와 SDK는 일반적으로 base URL과 모델 id만 바꾸면 작동합니다.

염두에 두어야 할 제한도 있습니다. 클립은 15초로, 해상도는 720p로 제한되므로, 더 긴 러닝타임이나 더 높은 충실도가 필요한 작업에는 다른 모델이나 여러 생성을 이어 붙이는 조립 단계가 필요합니다. 오디오 생성은 제공된 세부 정보에 명시되어 있지 않으므로 출력에 소리가 포함된다고 가정하지 마십시오. 작업이 움직임이 아니라 텍스트, 추론, 정지 이미지 작업이라면, 해당 카테고리의 모델이 이 모델보다 더 잘 맞을 것입니다.