Runway: Gen-4.5

Runway : Gen-4.5 est un modèle de génération vidéo de Runway, l'entreprise derrière la famille Gen d'outils de génération vidéo. Il appartient à la catégorie vidéo et est conçu pour la création de scènes cinématographiques, Runway décrivant ses points forts comme la qualité du mouvement, la fidélité visuelle et le respect du prompt. Si vous connaissez déjà la gamme de modèles de Runway, il s'agit de l'entrée Gen-4.5, et sur api14 il est adressé par l'identifiant de modèle runway/gen-4.5.

Le modèle accepte des entrées texte et image et produit de la vidéo comme seule sortie. Les prompts texte pilotent la génération texte-vers-vidéo, tandis qu'une image peut être fournie comme première image pour les flux image-vers-vidéo, ce qui vous permet d'ancrer un plan sur une composition de départ spécifique. La sortie est en 720p, et vous pouvez choisir entre les ratios d'image 16:9 et 9:16, couvrant les formats paysage et vertical standard. Les durées de clip vont de 2 à 10 secondes par incréments d'une seconde, vous pouvez donc demander aussi bien un beat très court qu'un plan de dix secondes. La génération audio n'est pas disponible, prévoyez donc d'ajouter le son séparément. Aucune longueur de contexte n'est indiquée pour ce modèle, ce qui est attendu pour un générateur vidéo plutôt qu'un modèle texte.

Les usages pratiques découlent de ces capacités. Le texte-vers-vidéo convient au travail conceptuel, aux storyboards qui doivent bouger, et aux courts plans d'établissement où vous voulez itérer rapidement sur un prompt. L'image-vers-vidéo est utile lorsque vous avez une image fixe que vous voulez animer, comme une photo de produit, une image clé d'un artiste, ou une image extraite d'un montage existant, et que vous voulez que le mouvement démarre à partir de cette image exacte. L'option 9:16 rend le modèle pertinent pour les formats verticaux, et la plage de 2 à 10 secondes convient aux clips sociaux, aux publicités et aux inserts plutôt qu'aux séquences longues. Comme il n'y a pas de piste audio, il fonctionne mieux comme source visuelle que vous assemblez dans un éditeur.

Vous l'appelez via l'API compatible OpenAI d'api14 en utilisant l'identifiant de modèle runway/gen-4.5, donc le code client de style OpenAI existant fonctionne avec un changement d'URL de base et de nom de modèle. Le modèle n'expose aucun paramètre de requête ajustable au-delà de l'identifiant de modèle lui-même, donc le prompt et toute image de première image portent la direction créative. La durée, le ratio d'image et la résolution sont fixés par l'ensemble pris en charge par le modèle plutôt qu'exposés comme paramètres ajustables, vous ne devez donc pas vous attendre à transmettre des réglages d'échantillonnage ou de génération via la requête.

Si vous avez besoin d'audio généré en même temps que la vidéo, ou de résolutions supérieures à 720p, ce modèle ne les fournit pas et une autre option pourrait mieux convenir. Il est également peu adapté aux séquences continues longues, puisque le clip maximum est de 10 secondes. Pour la génération d'images fixes ou les tâches textuelles, un autre modèle sur api14 est le bon choix.