Esittelemme uuden rajavideomallimme, Runway Gen-4.5. Aiemmin tunnettu nimellä Whisper Thunder (alias David). Gen-4.5 on huipputeknologiaa ja asettaa uuden standardin videon tuotannon liikkeen laadulle, prompt-tarkkuudelle ja visuaaliselle tarkkuudelle. Lue lisää alta.

Runway Gen-4.5 edustaa merkittäviä edistysaskeleita sekä esikoulutuksen datatehokkuudessa että jälkikoulutuksen tekniikoissa videomalleissa, ja toimii uutena perustana maailmanmallinnukselle. Gen-4.5 sai 1 247 Elo-pistettä Artificial Analysis Text to Video -tulostaulukossa, asettaen uuden standardin ja ylittäen kaikki muut tekoälyvideomallit maailmassa.

Kaksi vuotta sitten esittelimme Gen-1:n, ensimmäisen julkisesti saatavilla olevan videotuotantomallin. Se mahdollisti täysin uuden luovan ilmaisun muodon ja loi uuden tuotekategorian. Viimeisen kahden vuoden aikana olemme johtaneet alaa tehdessään videomalleista tehokkaampia ja hallittavampia, tuoden merkittäviä perusmalliparannuksia uusien ohjainten ja yleisten editointimahdollisuuksien mahdollistamiseen. Tänään esittelemme Gen-4.5:n — pitkän tutkimustyön huipentuman videomallien esi- ja jälkikoulutuksen edistämiseksi.

Malli on erinomainen monimutkaisten, sekvensoitujen käskyjen ymmärtämisessä ja suorittamisessa. Voit määrittää yksityiskohtaisen kamerakoreografian, monimutkaiset kohtaussommitelmat, tapahtumien tarkan ajoituksen ja hienovaraiset tunnelmamuutokset kaikki yhdellä kehotuksella. Olemme sitoutuneet kehittämään erittäin hallittavia ja joustavia työkaluja, jotka auttavat sinua toteuttamaan juuri sinun visiosi. Tekstistä videoon -toiminnon lisäksi tuomme kaikki olemassa olevat ohjaustilat (Image to Video, Keyframes, Video to Video) ja paljon muuta Gen-4.5:een.

Gen-4.5 saavuttaa ennennäkemättömän fyysisen ja visuaalisen tarkkuuden tason. Esineet liikkuvat realistisella painolla ja liikemäärällä. Pinnat käyttäytyvät kuten oikeassa maailmassa. Fysiikan lakeja voidaan sekä havaita että jättää huomiotta, riippuen näkökyvystäsi. Huolimatta suuresta kyvykkyyden harppauksesta, rajoituksia on edelleen, kuten epäonnistumiset kausaalisessa päättelyssä ja objektin pysyvyydessä. Uskomme, että nämä vikaantumismuodot täytyy ratkaista maailmanmallinnuksen edistämiseksi, ja työskentelemme aktiivisesti niiden ratkaisemiseksi.

Gen-4.5 kehitettiin kokonaan NVIDIA-näytönohjaimilla alkuvaiheen tutkimus- ja kehitystyössä, esikoulutuksessa, koulutuksen jälkeen ja päättelyssä. Teimme laajaa yhteistyötä NVIDIA:n kanssa laajentaaksemme videon diffuusiomallien optimoinnin rajoja, koulutustehokkuudesta päättelynopeuteen. Model inference toimii NVIDIA Hopper- ja Blackwell-sarjan näytönohjaimilla, tarjoten optimoidun suorituskyvyn tinkimättä laadusta. Alan ensisijainen lähestymistapa, joka mahdollistaa Gen-4.5:lle ennennäkemättömät kyvykkyydet.

Laajennamme vähitellen pääsyä kiitotielle Gen-4.5. Se tulee olemaan kaikkien saatavilla lähipäivinä. Opi lisää:

Gen-4.5 kehitettiin kokonaan @nvidia GPU:lla alkuvaiheen tutkimus- ja kehitystyössä, esikoulutuksessa, koulutuksen jälkeisessä koulutuksessa ja päättelyssä. Teimme laajaa yhteistyötä NVIDIA:n kanssa laajentaaksemme videon diffuusiomallien optimoinnin rajoja, koulutustehokkuudesta päättelynopeuteen. Model inference toimii NVIDIA Hopper- ja Blackwell-sarjan näytönohjaimilla, tarjoten optimoidun suorituskyvyn tinkimättä laadusta. Alan ensisijainen lähestymistapa, joka mahdollistaa Gen-4.5:lle ennennäkemättömät kyvykkyydet.

@nvidia Laajennamme vähitellen pääsyä kiitotielle Gen-4.5. Se tulee olemaan kaikkien saatavilla lähipäivinä. Opi lisää: