Vi introduserer vår nye frontier-videomodell, Runway Gen-4.5. Tidligere kjent som Whisper Thunder (også kjent som) David. Gen-4.5 er topp moderne og setter en ny standard for videogenerering, bevegelseskvalitet, rask etterlevelse og visuell nøyaktighet. Lær mer nedenfor.

Runway Gen-4.5 representerer betydelige fremskritt både innen dataeffektivitet før trening og i teknikker for videomodeller etter trening, og fungerer som vår nye grunnmodell for verdensmodellering. Gen-4.5 oppnådde 1 247 Elo-poeng på Artificial Analysis Text to Video-ledertavlen, satte en ny standard og overgikk alle andre AI-videomodeller i verden.

For to år siden introduserte vi Gen-1, den første offentlig tilgjengelige videogenereringsmodellen. Det muliggjorde en helt ny form for kreativt uttrykk og skapte en ny produktkategori. De siste to årene har vi ledet bransjen i å gjøre videomodeller kraftigere og mer kontrollerbare, fra betydelige forbedringer av grunnmodellen til å muliggjøre nye kontroller og generelle redigeringsmuligheter. I dag introduserer vi Gen-4.5 — kulminasjonen av en lang forskningsinnsats for å fremme videomodell-pre-training og post-training.

Modellen utmerker seg i å forstå og utføre komplekse, sekvenserte instruksjoner. Du kan spesifisere detaljert kamerakoreografi, intrikate scenekomposisjoner, presis timing av hendelser og subtile atmosfæriske endringer – alt i én prompt. Vi er fortsatt forpliktet til å lage svært kontrollerbare og fleksible verktøy som hjelper deg å realisere din eksakte visjon. I tillegg til tekst til video vil vi bringe alle eksisterende kontrollmoduser (bilde til video, nøkkelbilder, video til video) og mer til Gen-4.5.

Gen-4.5 oppnår et enestående nivå av fysisk nøyaktighet og visuell presisjon. Objekter beveger seg med realistisk vekt og momentum. Overflater oppfører seg slik de ville gjort i den virkelige verden. Fysikkens lover kan både observeres eller ignoreres, avhengig av synet ditt. Til tross for det store spranget i evner, gjenstår begrensninger, som svikt i kausal resonnement og objektpermanens. Vi mener at disse feilmodusene må adresseres for å videreutvikle verdensmodellering, og jobber aktivt med å løse dem.

Gen-4.5 ble utviklet utelukkende på NVIDIA-GPUer gjennom innledende forskning og utvikling, fortrening, ettertrening og inferens. Vi samarbeidet mye med NVIDIA for å flytte grensene for hva som er mulig innen optimalisering av videodiffusjonsmodeller, fra treningseffektivitet til slutningshastighet. Modellinferens kjører på NVIDIA Hopper- og Blackwell-seriens GPU-er, og gir optimalisert ytelse uten å gå på kompromiss med kvaliteten. En bransjeledende tilnærming som gjør det mulig for Gen-4.5 å oppnå enestående kapasiteter.

Vi ruller gradvis ut tilgangen til rullebane Gen-4.5. Den vil være tilgjengelig for alle i løpet av de kommende dagene. Få mer informasjon:

Gen-4.5 ble utviklet utelukkende på @nvidia GPU-er gjennom innledende forskning og utvikling, fortrening, ettertrening og inferens. Vi samarbeidet mye med NVIDIA for å flytte grensene for hva som er mulig innen optimalisering av videodiffusjonsmodeller, fra treningseffektivitet til slutningshastighet. Modellinferens kjører på NVIDIA Hopper- og Blackwell-seriens GPU-er, og gir optimalisert ytelse uten å gå på kompromiss med kvaliteten. En bransjeledende tilnærming som gjør det mulig for Gen-4.5 å oppnå enestående kapasiteter.

@nvidia Vi ruller gradvis ut tilgangen til rullebane Gen-4.5. Den vil være tilgjengelig for alle i løpet av de kommende dagene. Få mer informasjon: