Runway: Gen-4.5

Runway: Gen-4.5 é um modelo de geração de vídeo da Runway, a empresa por trás da família Gen de ferramentas de vídeo generativo. Ele está na categoria de vídeo e foi criado para a criação de cenas cinematográficas, com a Runway descrevendo seus pontos fortes como qualidade de movimento, fidelidade visual e aderência ao prompt. Se você já conhece a linha de modelos da Runway, esta é a entrada Gen-4.5, e na api14 ele é endereçado pelo id de modelo runway/gen-4.5.

O modelo aceita entradas de texto e imagem e produz vídeo como sua única saída. Prompts de texto conduzem a geração de texto para vídeo, enquanto uma imagem pode ser fornecida como primeiro quadro para fluxos de trabalho de imagem para vídeo, o que permite ancorar uma cena a uma composição inicial específica. A saída é 720p, e você pode escolher entre proporções de aspecto 16:9 e 9:16, cobrindo os formatos padrão paisagem e vertical. As durações dos clipes variam de 2 a 10 segundos em incrementos de um segundo, então você pode solicitar desde um trecho muito curto até uma cena de dez segundos. A geração de áudio não está disponível, então planeje adicionar som separadamente. Nenhum comprimento de contexto é listado para este modelo, o que é esperado para um gerador de vídeo em vez de um modelo de texto.

Os usos práticos decorrem dessas capacidades. Texto para vídeo é adequado para trabalho de conceito, storyboards que precisam se mover e planos de estabelecimento curtos onde você quer iterar em um prompt rapidamente. Imagem para vídeo é útil quando você tem uma imagem estática que deseja animar, como uma foto de produto, um keyframe de um artista ou um quadro extraído de uma edição existente, e você quer que o movimento comece a partir dessa imagem exata. A opção 9:16 torna o modelo relevante para formatos verticais, e o intervalo de 2 a 10 segundos se encaixa em clipes sociais, anúncios e inserções em vez de sequências de longa duração. Como não há faixa de áudio, ele funciona melhor como uma fonte visual que você monta em um editor.

Você o chama através da API compatível com OpenAI da api14 usando o id de modelo runway/gen-4.5, então código de cliente existente no estilo OpenAI funciona com uma mudança de URL base e nome do modelo. O modelo não expõe parâmetros de requisição ajustáveis além do próprio id de modelo, então o prompt e qualquer imagem de primeiro quadro carregam a direção criativa. Duração, proporção de aspecto e resolução são fixadas pelo conjunto suportado do modelo em vez de expostas como parâmetros ajustáveis, então você não deve esperar passar configurações de amostragem ou geração através da requisição.

Se você precisa de áudio gerado junto com o vídeo, ou resoluções acima de 720p, este modelo não as fornece e outra opção pode se adequar melhor. Ele também é uma escolha ruim para filmagens contínuas longas, já que o clipe máximo é de 10 segundos. Para geração de imagem estática ou tarefas de texto, um modelo diferente na api14 é a escolha certa.