ByteDance: Seedance 1.5 Pro

Seedance 1.5 Pro is een videogeneratiemodel van ByteDance, vermeld op api14 als bytedance/seedance-1-5-pro. Het behoort tot ByteDance's Seedance lijn van audiovisuele generatiemodellen, en de provider beschrijft het als gebouwd op een 4.5B parameter Dual-Branch Diffusion Transformer architectuur. Het bevindt zich in de videocategorie, dus zijn rol is het genereren van video in plaats van het verwerken van tekst of chattaken.

Het model accepteert tekst- en afbeeldingsinvoer en produceert video als enige uitvoer. Omdat het video en audio gelijktijdig genereert in een enkele uniforme doorgang, maakt audio deel uit van het gegenereerde resultaat in plaats van iets dat achteraf wordt toegevoegd. Uitvoer kan worden geproduceerd op 480p, 720p of 1080p, in beeldverhoudingen van 1:1, 3:4, 9:16, 9:21, 4:3, 16:9 en 21:9, en met een duur van 4 tot 12 seconden in stappen van één seconde. Het ondersteunt ook frame-afbeeldingen, specifiek een first_frame en een last_frame, waarmee je het begin, het einde, of beide uiteinden van een clip kunt verankeren. Er is geen contextlengte in tokens gepubliceerd voor dit model, wat te verwachten is voor een videogenerator, en maxOutput is 0 in de modelmetadata.

Die mogelijkheden wijzen op een vrij specifieke set toepassingen. Tekst naar video past bij korte conceptuele clips, social formats en storyboard previews, vooral omdat de lijst met beeldverhoudingen vierkante, verticale en breedbeeldleveringen dekt. Afbeelding naar video, gecombineerd met first_frame en last_frame, past bij workflows waarbij je al een stilstaand beeld of een keyframe hebt en beweging wilt tussen gedefinieerde visuele boeksteunen, zoals het animeren van een productshot of het overbruggen van twee frames van een montage. Native audiogeneratie betekent dat je clips kunt aanvragen waarbij geluid deel uitmaakt van de uitvoer in plaats van ze apart te scoren. Het bereik van 4 tot 12 seconden maakt het model het meest geschikt voor korte shots in plaats van lange continue sequenties, en de resolutieopties laten je previewkwaliteit afwegen tegen uiteindelijke uitvoerkwaliteit.

Je roept het aan via api14's OpenAI-compatible API met het model-id "bytedance/seedance-1-5-pro". Omdat de interface het OpenAI-formaat volgt, kun je dezelfde clientbibliotheken en requeststructuur gebruiken die je al gebruikt voor andere modellen op de gateway, waarbij je het modelveld op dit id richt. Onder de requestparameters is frequency_penalty degene die als ondersteund voor dit model wordt vermeld. Generatie-instellingen zoals resolutie, beeldverhouding, duur, first_frame, last_frame en audiogeneratie worden blootgesteld via de eigen opties van het model in plaats van de standaard sampling parameters die je voor een tekstmodel zou gebruiken.

Het is de moeite waard om je vereisten te vergelijken met wat het model blootstelt voordat je je vastlegt. Er is geen gepubliceerde tokencontextlengte, en maxOutput is 0, dus dit is geen tekstaanvullingsmodel en mag niet worden gebruikt waar je token-gebaseerde prompting of tekstuele antwoorden nodig hebt. De uitvoer is beperkt tot 12 seconden per generatie, dus langere stukken moeten uit meerdere clips worden samengesteld. Als je taak tekst, beeldbegrip of een andere niet-video modaliteit is, past een model in die categorie op api14 beter.