ByteDance: Seedance 2.0

ByteDance: Seedance 2.0, üretken medya modelleri serisi Seedance'in arkasındaki şirket olan ByteDance tarafından geliştirilen bir video üretim modelidir. Video kategorisinde yer alır ve görevi, girdilerinizi metin veya sabit görüntü yerine tamamlanmış video çıktısına dönüştürmektir. Üretilmiş hareketli görüntülere ihtiyaç duyan bir şey geliştiriyorsanız, bu sağlayıcıdan bakmanız gereken model ailesi budur.

Girdi tarafında Seedance 2.0 çok modludur. Referans olarak metin, görüntü, video ve ses kabul eder ve tek çıktısı olarak video üretir. Bu kombinasyon metinden videoya, ilk ve son kare kontrolü ile görüntüden videoya ve mevcut klipler veya sesi yönlendirme olarak sağladığınız çok modlu referanstan videoya senaryolarını kapsar. Çıktı 480p, 720p, 1080p veya 4K olarak, 1:1, 3:4, 9:16, 4:3, 16:9, 21:9 ve 9:21 en boy oranlarında, 4 ila 15 saniye arasında birer saniyelik adımlarla üretilebilir. Ses üretimi desteklenir, yani döndürülen video bir ses parçası içerebilir. Bu model için yayımlanmış bir bağlam uzunluğu yoktur; bu, bir metin modeli yerine bir video üreticisi için beklenen bir durumdur.

Bu yetenekler birkaç pratik kalıba işaret eder. Karakter tutarlılığı belirtilen bir güçlü yöndür, bu nedenle aynı öznenin çekimler boyunca aynı görünmesi gereken bölümlü veya seri içerik doğal bir uyumdur. İlk ve son kare kontrolü, çekimden çekime geçişler ve hâlihazırda sahip olduğunuz iki anahtar kare arasında interpolasyon için uygundur. Video ve ses girdileriyle referanstan videoya, üretilen bir klibin mevcut materyalin stili, temposu veya sesiyle eşleşmesini istediğinizde kullanışlıdır. En boy oranı aralığı dikey sosyal formatları, kare gönderileri, geniş ekranı ve ultra geniş ekranı kapsar ve 4 ila 15 saniyelik süreler kısa biçimli reklamlar, tanıtımlar ve sosyal kliplerle örtüşür. 4K çıktı, sonucun daha büyük bir ekranda veya daha ileri düzenlemede ayakta kalması gerektiğinde önemlidir.

Modeli api14'ün OpenAI uyumlu API'si üzerinden "bytedance/seedance-2.0" model kimliğiyle çağırırsınız. Arayüz OpenAI şemasını izlediği için, mevcut bir OpenAI istemcisini api14'ün temel URL'sine yönlendirebilir ve isteğinizi yukarıdaki model kimliği ile istem ve referans medyanızı istek gövdesine koyarak olağan biçimde gönderebilirsiniz. Bu model için listelenen parametreler arasında frequency_penalty desteklenir. Çözünürlük, en boy oranı, süre, ilk ve son kare görüntüleri ve ses üretimi gibi diğer üretim kontrolleri standart sohbet parametreleri yerine modelin kendi yapılandırma yüzeyinin parçasıdır, bu nedenle nasıl iletildikleri için model sayfasına bakın.

Burada akıl yürütülecek yayımlanmış bir bağlam uzunluğu ve maksimum çıktı token sayısı yoktur, çünkü çıktı bir token akışı yerine bir video dosyasıdır. Göreviniz metin üretimi, akıl yürütme, sınıflandırma veya kelime döndüren herhangi bir şeyse, bir metin modeli daha iyi uyum sağlar; Seedance 2.0 yalnızca teslimat videosu olduğunda kullanışlıdır. Bu kapsam içinde, çok modlu referanslara, kare düzeyinde kontrole veya üretilen klipte sese ihtiyaç duyduğunuzda değerlendirilecek seçenektir.