ByteDance: Seedance 2.0 Mini

ByteDance: Seedance 2.0 Mini هو نموذج توليد فيديو من ByteDance، الشركة التي تقف خلف عائلة Seedance لأنظمة توليد الفيديو. يقع في فئة الفيديو على api14، ومهمته تحويل المطالبات والمواد المرجعية إلى مقاطع فيديو مكتملة. وهو الشقيق الأصغر في خط Seedance 2.0، موجه للمطورين الذين يريدون توليد فيديو من ByteDance دون اللجوء إلى النسخة الأكبر.

يقبل النموذج النص والصورة والفيديو والصوت كمدخلات، ويعيد الفيديو كمخرج وحيد له. تغطي هذه التركيبة عدة أنماط توليد: من النص إلى الفيديو من مطالبة مكتوبة، ومن الصورة إلى الفيديو مع التحكم في الإطار الأول أو الإطار الأخير أو كليهما، ومن المرجع متعدد الوسائط إلى الفيديو حيث توجه الصور والفيديو والصوت النتيجة. دقات الإخراج هي 480p و720p، ويمكن أن تمتد المقاطع من 4 إلى 15 ثانية بخطوات ثانية واحدة. تغطي نسب الأبعاد 1:1 و3:4 و9:16 و4:3 و16:9 و21:9 و9:21. توليد الصوت مدعوم، لذا يمكن أن يحمل المقطع مسارا صوتيا مولدا بدلا من أن يأتي صامتا. لم يتم نشر طول سياق لهذا النموذج.

تشير هذه القدرات إلى مجموعة محددة نوعا ما من المهام. المقاطع العمودية القصيرة بنسبة 9:16 لخلاصات التواصل الاجتماعي، والقطع المربعة 1:1 لمواضع الخلاصات، والإطارات العريضة 16:9 أو 21:9 للاستخدام على الويب والعروض التقديمية، كلها مدعومة مباشرة بقائمة نسب الأبعاد. يناسب التحكم في الإطار الأول والأخير الانتقالات من لقطة إلى لقطة، أو الكشف عن المنتجات، أو أي حالة تحتاج فيها إلى أن يبدأ المقطع بصورة ثابتة وينتهي بأخرى. يناسب التحويل من المرجع إلى الفيديو مع مدخلات الصورة والفيديو والصوت نقل الأسلوب، واتساق الشخصية أو المشهد عبر اللقطات، والتعديلات المدفوعة بالموسيقى حيث يجب أن يشكل الصوت الإيقاع. يحافظ النطاق من 4 إلى 15 ثانية على المخرجات في نطاق اللقطات الفردية والتسلسلات القصيرة بدلا من السرد الطويل.

تستدعيه عبر واجهة api14 المتوافقة مع OpenAI باستخدام معرف النموذج "bytedance/seedance-2.0-mini". ولأن الواجهة تتبع مخطط OpenAI، فإن العملاء وحزم SDK الحالية تعمل مع تغيير معرف النموذج ونقطة النهاية. من بين المعاملات المدرجة لهذا النموذج، frequency_penalty مدعوم. أما عناصر التحكم الخاصة بالتوليد، الدقة ونسبة الأبعاد والمدة وصور الإطار الأول والأخير وتوليد الصوت، فهي جزء من سطح طلب النموذج وليست من معاملات المحادثة المشتركة.

هناك بعض الأمور التي يجب وزنها قبل الالتزام. لم يتم نشر طول سياق، والحد الأقصى للمخرجات مدرج على أنه 0، لذا فإن التفكير القائم على الرموز حول حجم المطالبة ليس مفيدا هنا؛ تعامل مع المطالبة كموجز إبداعي بدلا من مستند طويل. يصل الإخراج إلى 720p كحد أقصى، لذا فإن العمل الذي يحتاج إلى دقة أعلى، أو مقاطع أطول من 15 ثانية، قد يناسبه نموذج مختلف بشكل أفضل. إذا كانت مهمتك توليد نص أو صورة بدلا من فيديو، فهذا النموذج في الفئة الخاطئة تماما.