HeyGen: HeyGen Video

HeyGen Video, api14 üzerinde heygen/heygen-video-1 model id'siyle listelenen, HeyGen'den gelen genel amaçlı bir video üretim modelidir. Video kategorisinde yer alır ve metin veya sohbet görevleri yerine kısa klipler oluşturmak için tasarlanmıştır. Değerlendiriyorsanız anlaşılması gereken temel şey, bunun bir üretim uç noktası olduğudur: ona kaynak materyal verirsiniz ve size bir video dosyası döndürür.

Girdi tarafında model metin, görsel, video ve ses kabul eder, böylece bir klibi yazılı bir istemden, bir referans kareden, mevcut görüntülerden veya bir ses parçasından yönlendirebilirsiniz. Tek çıktı modalitesi videodur. Bu model için yayımlanmış bir bağlam uzunluğu yoktur, dolayısıyla token tabanlı planlama burada geçerli değildir. Çıktı ayrıntıları daha faydalıdır: klipler 480p, 768p veya 2K olarak, 21:9, 16:9, 4:3, 1:1, 3:4 ve 9:16 en boy oranlarında oluşturulabilir ve süreler bir saniyelik adımlarla 5 ila 15 saniye arasında değişir. Açılış çekimini sabitlemek için bir first_frame görseli sağlanabilir. Ses üretimi etkin değildir, bu nedenle model kendi başına diyalog, ortam sesi veya ses efekti sentezlemez.

Bu yetenekler oldukça belirli bir iş kümesine işaret eder. Sosyal akışlar için 9:16 oranında kısa dikey klipler, akış içi yerleşimler için 1:1 kare kesitler ve açılış sayfaları ile sunumlar için geniş ekran 16:9 veya 21:9, desteklenen en boy oranlarının içine girer. Bir first_frame görseli kabul edildiği için, aynı başlangıç karesini yeniden kullanarak bir dizi klip boyunca tutarlı bir görünüm koruyabilirsiniz. Video ve ses girdi olarak kabul edildiği için, yalnızca metinden başlamak yerine mevcut görüntülerden veya sağlanan bir parçadan da çalışabilirsiniz. 5 ila 15 saniye aralığı, uzun soluklu anlatı yerine tanıtımlar, ürün çekimleri ve döngülenebilir arka plan bölümleri için uygundur.

api14 üzerinden çağırmak, ağ geçidindeki diğer herhangi bir modelle aynı şekilde çalışır: OpenAI uyumlu uç noktayı kullanın ve model id'si olarak heygen/heygen-video-1 geçin. Model hiçbir desteklenen istek parametresi sunmaz, dolayısıyla istek gövdesinde ayarlanacak örnekleme veya üretim bayrağı yoktur. Pratikte bu, sonuç üzerindeki kontrolünüzün sağladığınız girdilerden (istem metni, referans görseli, kaynak video, ses) ve modelin tanımladığı çıktı ayarlarından (çözünürlük, en boy oranı, süre ve ilk kare gibi) geldiği anlamına gelir.

Taahhüt vermeden önce tartılması gereken iki sınır vardır. Planlama yapılacak bir bağlam uzunluğu yoktur ve model ses üretmez, bu nedenle sentezlenmiş konuşma, ortam sesi veya ses efektlerine bağlı herhangi bir projenin bu öğeleri başka bir yerde üretip sonradan birleştirmesi gerekir. Göreviniz metin üretimi, akıl yürütme veya video çıktısı dışında bir şeyse, api14 üzerindeki farklı bir model daha iyi uyacaktır. Yine de kısa biçimli video üretimi içinde, çoklu girdi modaliteleri, bir ilk kare sabitleyicisi ve geniş bir en boy oranı ile süre yelpazesi kombinasyonu, yaygın klip gereksinimlerinin çoğunu kapsar.