Apresentando nosso novo modelo de vídeo fronteireiro, Runway Gen-4.5. Anteriormente conhecido como Whisper Thunder (também conhecido como David). A Gen-4.5 é de ponta e estabelece um novo padrão para geração de vídeo, qualidade de movimento, adesão rápida e fidelidade visual. Saiba mais abaixo.

A Runway Gen-4.5 representa avanços significativos tanto na eficiência dos dados pré-treinamento quanto nas técnicas pós-treinamento para modelos de vídeo, e serve como nosso novo modelo de base para a modelagem mundial. A Gen-4.5 obteve 1.247 pontos Elo no ranking de Texto para Vídeo de Análise Artificial, estabelecendo um novo padrão e superando todos os outros modelos de vídeo de IA no mundo.

Há dois anos, lançamos a Gen-1, o primeiro modelo de geração de vídeo disponível publicamente. Isso permitiu uma forma totalmente nova de expressão criativa e criou uma nova categoria de produtos. Nos últimos dois anos, lideramos a indústria ao tornar os modelos de vídeo mais poderosos e controláveis, desde melhorias significativas nos modelos base até permitir novos controles e capacidades gerais de edição. Hoje, estamos apresentando a Gen-4.5 — o resultado de um longo esforço de pesquisa para avançar o pré-treinamento e pós-treinamento dos modelos de vídeo.

O modelo se destaca em entender e executar instruções complexas e sequenciadas. Você pode especificar coreografias detalhadas de câmera, composições de cenas intrincadas, tempo preciso dos eventos e mudanças atmosféricas sutis, tudo em um único prompt. Continuamos comprometidos em criar ferramentas altamente controláveis e flexíveis que ajudem você a concretizar exatamente sua visão. Além do Texto para Vídeo, levaremos todos os modos de controle existentes (Imagem para Vídeo, Keyframes, Vídeo para Vídeo) e mais para a Gen-4.5.

A Gen-4.5 alcança um nível sem precedentes de precisão física e precisão visual. Objetos se movem com peso e momento realistas. As superfícies se comportam como se comportariam no mundo real. As leis da física podem ser tanto observadas quanto ignoradas, dependendo da sua visão. Apesar do grande salto nas capacidades, limitações permanecem, como falhas no raciocínio causal e na permanência do objeto. Acreditamos que esses modos de falha precisam ser abordados para avançar ainda mais a modelagem do mundo, e estamos trabalhando ativamente para resolvê-los.

A Gen-4.5 foi desenvolvida inteiramente em GPUs NVIDIA durante P&D inicial, pré-treinamento, pós-treinamento e inferência. Colaboramos extensivamente com a NVIDIA para expandir os limites do que é possível na otimização de modelos de difusão de vídeo, desde a eficiência do treinamento até a velocidade de inferência. A inferência de modelos roda nas GPUs NVIDIA Hopper e Blackwell, oferecendo desempenho otimizado sem comprometer a qualidade. Uma abordagem pioneira na indústria que permite à Gen-4.5 alcançar capacidades sem precedentes.

Estamos gradualmente implementando o acesso à Runway Gen-4.5. Estará disponível para todos nos próximos dias. Saiba Mais:

A Gen-4.5 foi desenvolvida inteiramente em @nvidia GPUs durante P&D inicial, pré-treinamento, pós-treinamento e inferência. Colaboramos extensivamente com a NVIDIA para expandir os limites do que é possível na otimização de modelos de difusão de vídeo, desde a eficiência do treinamento até a velocidade de inferência. A inferência de modelos roda nas GPUs NVIDIA Hopper e Blackwell, oferecendo desempenho otimizado sem comprometer a qualidade. Uma abordagem pioneira na indústria que permite à Gen-4.5 alcançar capacidades sem precedentes.

@nvidia Estamos gradualmente expandindo o acesso à Pista Gen-4.5. Estará disponível para todos nos próximos dias. Saiba Mais: