Google : Gemini Omni 1.1 Flash est un modèle natif multimodal de génération et d'édition vidéo de Google. C'est le successeur généralement disponible de Gemini Omni Flash Preview, et il se situe dans la catégorie vidéo tout en couvrant également le texte. Si vous suivez la gamme Omni de Google, il s'agit de la version destinée à un usage en production plutôt qu'à l'expérimentation en preview.
Le modèle accepte le texte, l'image et la vidéo en entrée, et produit du texte et de la vidéo en sortie. Sa fenêtre de contexte est de 131 072 tokens, avec une sortie maximale de 65 536 tokens. Côté vidéo, il prend en charge les résolutions 360p, 720p, 1080p et 4K, les ratios d'aspect 16:9 et 9:16, et des durées de clip de 3 à 10 secondes par pas d'une seconde. Il peut prendre une première image, une dernière image, ou les deux, ce qui rend possibles des transitions contrôlées et de l'interpolation, et il peut générer de l'audio en même temps que la vidéo.
Ces capacités correspondent à un ensemble de workflows assez spécifique. Le texte-vers-vidéo couvre les plans de concept, les storyboards et les clips sociaux courts, tandis que l'image-vers-vidéo vous permet d'animer une image fixe ou un rendu produit. Fournir une première et une dernière image est utile lorsque vous avez besoin d'un état de début et de fin définis, par exemple dans des déclinaisons publicitaires ou des transitions de scène. Le ratio 9:16 et les durées courtes conviennent aux formats verticaux, et la sortie 4K est là lorsque le livrable final nécessite la résolution supplémentaire. Comme le modèle lit aussi la vidéo en entrée, l'édition et le restylage de séquences existantes font partie de la même surface plutôt que d'un pipeline séparé.
Vous l'appelez via l'API compatible OpenAI d'api14 en utilisant l'identifiant de modèle "google/gemini-omni-1.1-flash". Les paramètres de requête pris en charge sont include_reasoning, max_tokens, reasoning, reasoning_effort, seed, temperature et top_p. Le paramètre seed vaut la peine d'être défini lorsque vous voulez des générations reproductibles d'une exécution à l'autre, et temperature et top_p vous donnent le contrôle habituel sur l'échantillonnage. Les paramètres de raisonnement vous permettent de décider si le raisonnement est inclus et combien d'effort y est consacré, ce qui compte lorsqu'un prompt nécessite une planification avant que la vidéo ne soit produite.
Il n'existe aucune restriction énoncée qui exclurait le modèle pour un travail vidéo général, mais l'ensemble fixe de ratios d'aspect, 16:9 et 9:16, signifie que les formats en dehors de ces deux-là ne sont pas couverts ici. Les durées sont plafonnées à 10 secondes par génération, donc les séquences plus longues doivent être construites à partir de plusieurs clips. Si votre tâche est purement de la génération de texte sans composante vidéo, un modèle axé sur le texte sera généralement le choix le plus simple.