Alibaba: HappyHorse 1.1

Alibaba: HappyHorse 1.1, Alibaba tarafından sunulan bir video üretim modelidir. Video kategorisinde yer alır ve görevi, girdilerinizi metin veya sabit görüntü yerine kısa video kliplerine dönüştürmektir. Üretilmiş hareketli içerik gerektiren bir ürün geliştiriyorsanız ve halihazırda Alibaba modelleri veya OpenAI uyumlu bir yığın ile çalışıyorsanız, bu slot için değerlendirmeniz gereken model budur.

Model, metin ve görüntü girdilerini kabul eder ve tek çıktı olarak video üretir. Yalnızca bir metin istemiyle, tek bir başlangıç görüntüsüyle veya bir dizi referans görüntüyle yönlendirebilirsiniz. Çıktı 720p ve 1080p olarak mevcuttur ve çok çeşitli en boy oranları arasından seçim yapabilirsiniz: 16:9, 9:16, 1:1, 4:3, 3:4, 21:9 ve 9:21. Klip süreleri birer saniyelik adımlarla 3 ila 15 saniye arasında değişir, böylece çok kısa bir döngüden on beş saniyelik bir çekime kadar her şeyi talep edebilirsiniz. Çıktının ilk karesi, sağlanan bir görüntüye sabitlenebilir. Bu model için yayımlanmış bir bağlam uzunluğu yoktur; bu bir video üreticisi için beklenen bir durumdur, çünkü ilgili kısıtlar bir token penceresi değil çözünürlük, en boy oranı ve süredir.

Bu yetenekler oldukça belirli bir kullanım kümesine işaret eder. 9:16 ve 9:21 gibi dikey oranlar kısa biçimli sosyal ve mobil yerleşimlere uyarken, 16:9 ve 21:9 geniş ekran ve sinematik çerçevelemeye uyar. Tek bir başlangıç görüntüsü, bir sabit görüntüyü hareketlendirmek istediğinizde kullanışlıdır; örneğin bir ürün fotoğrafını veya bir karakter portresini harekete geçirmek gibi. Referans görüntüler, bir çekim boyunca tutarlılığa ihtiyaç duyduğunuzda veya modelin sağladığınız görsel stili izlemesini istediğinizde yardımcı olur. 3 ila 15 saniye aralığı sosyal reklamları, teaser kliplerini, animasyonlu storyboard'ları ve kısa arka plan görüntülerini kapsar. Süreler saniye başına seçilebildiği için önce kısa bir klip üzerinde iterasyon yapabilir ve hareket doğru göründüğünde onu uzatabilirsiniz.

Modeli, "alibaba/happyhorse-1.1" model id'sini kullanarak api14'ün OpenAI uyumlu API'si üzerinden çağırırsınız. Desteklenen istek parametreleri max_tokens, presence_penalty, response_format, seed, temperature ve top_p'dir. Tekrarlanabilir üretimler istediğinizde seed değerini ayarlamak faydalıdır; temperature ve top_p ise çalıştırmalar arasındaki varyasyon üzerinde size kontrol verir. Kalan parametreler diğer OpenAI uyumlu uç noktalarla aynı kuralları izler, bu nedenle mevcut istemci kütüphaneleri ve istek biçimleri minimum değişiklikle taşınmalıdır.

Karar verirken akılda tutulması gereken birkaç şey var. Çıktı uzunluğu 15 saniyeyle sınırlıdır, bu nedenle daha uzun her şeyin birden fazla üretimden birleştirilmesi gerekir. Yalnızca ilk kare bir görüntüye sabitlenebilir ve ses üretimi belirtilmemiştir, bu nedenle klibin sese ihtiyacı varsa kendi ses parçanızı eklemeyi planlayın. Göreviniz video yerine metin üretimi, görüntü üretimi veya düzenleme ise, o kategorilerden birindeki bir model daha iyi uyacaktır.