Alibaba: HappyHorse 1.1

Alibaba: HappyHorse 1.1은 Alibaba의 비디오 생성 모델입니다. 비디오 카테고리에 속하며, 입력을 텍스트나 정지 이미지가 아닌 짧은 비디오 클립으로 바꾸는 역할을 합니다. 생성된 모션 콘텐츠가 필요한 제품을 만들고 있고 이미 Alibaba 모델이나 OpenAI 호환 스택을 사용하고 있다면, 이 모델이 해당 자리에 적합한지 평가해 볼 만합니다.

이 모델은 텍스트와 이미지 입력을 받아들이고 비디오를 유일한 출력으로 생성합니다. 텍스트 프롬프트만으로, 시작 이미지 하나로, 또는 여러 참조 이미지 세트로 구동할 수 있습니다. 출력은 720p와 1080p로 제공되며, 16:9, 9:16, 1:1, 4:3, 3:4, 21:9, 9:21 등 다양한 화면비 중에서 선택할 수 있습니다. 클립 길이는 1초 단위로 3초에서 15초까지이며, 아주 짧은 루프부터 15초짜리 장면까지 요청할 수 있습니다. 출력의 첫 프레임은 제공한 이미지에 고정할 수 있습니다. 이 모델에는 공개된 컨텍스트 길이가 없는데, 이는 비디오 생성기에서 예상되는 일입니다. 관련 제약이 토큰 윈도우가 아니라 해상도, 화면비, 길이이기 때문입니다.

이러한 기능은 상당히 구체적인 용도 집합을 가리킵니다. 9:16과 9:21 같은 세로 화면비는 숏폼 소셜 및 모바일 배치에 맞고, 16:9와 21:9는 와이드스크린 및 영화적 프레이밍에 맞습니다. 시작 이미지 하나는 정지 이미지를 애니메이션화하려 할 때 유용합니다. 예를 들어 제품 사진이나 캐릭터 초상화를 움직이게 만드는 경우입니다. 참조 이미지는 한 장면 안에서 일관성이 필요하거나 모델이 제공한 시각 스타일을 따르길 원할 때 도움이 됩니다. 3초에서 15초 범위는 소셜 광고, 티저 클립, 애니메이션 스토리보드, 짧은 배경 영상을 포괄합니다. 길이를 초 단위로 선택할 수 있으므로, 짧은 클립을 먼저 반복 실험하고 모션이 적절해 보이면 확장할 수 있습니다.

모델은 모델 id "alibaba/happyhorse-1.1"을 사용해 api14의 OpenAI 호환 API로 호출합니다. 지원되는 요청 파라미터는 max_tokens, presence_penalty, response_format, seed, temperature, top_p입니다. 재현 가능한 생성을 원할 때는 seed를 설정할 가치가 있고, temperature와 top_p는 실행 간 변동을 제어할 수 있게 해줍니다. 나머지 파라미터는 다른 OpenAI 호환 엔드포인트와 같은 관례를 따르므로, 기존 클라이언트 라이브러리와 요청 형태를 최소한의 변경으로 그대로 사용할 수 있습니다.

결정할 때 염두에 둘 몇 가지가 있습니다. 출력 길이는 15초로 제한되므로, 그보다 긴 것은 여러 번의 생성으로 조립해야 합니다. 첫 프레임만 이미지에 고정할 수 있고, 오디오 생성은 명시되지 않았으므로 클립에 사운드트랙이 필요하다면 직접 추가할 계획을 세우세요. 작업이 비디오가 아니라 텍스트 생성, 이미지 생성 또는 편집이라면 해당 카테고리의 모델이 더 잘 맞을 것입니다.