Vă prezentăm noul nostru model video de frontieră, Runway Gen-4.5. Anterior cunoscut ca Whisper Thunder (cunoscut și ca David). Gen-4.5 este de ultimă generație și stabilește un nou standard pentru generarea video, calitatea mișcării, respectarea promptă și fidelitatea vizuală. Află mai multe mai jos.

Runway Gen-4.5 reprezintă progrese semnificative atât în eficiența datelor pre-antrenament, cât și în tehnicile post-antrenament pentru modele video și servește drept noul nostru model de bază pentru modelarea lumii. Gen-4.5 a obținut 1.247 de puncte Elo în clasamentul Artificial Analysis Text to Video, stabilind un nou standard și depășind toate celelalte modele video AI din lume.

Acum doi ani, am introdus Gen-1, primul model de generare video disponibil public. A permis o formă complet nouă de expresie creativă și a creat o nouă categorie de produse. În ultimii doi ani, am condus industria în a face modelele video mai puternice și mai ușor de controlat, de la aducerea unor îmbunătățiri semnificative ale modelelor de bază până la permiterea unor noi controale și capabilități generale de editare. Astăzi, introducem Gen-4.5 — culminarea unui efort îndelungat de cercetare pentru a avansa pre-instruirea și post-instruirea modelelor video.

Modelul excelează în înțelegerea și executarea instrucțiunilor complexe, secvențiate. Poți specifica coregrafie detaliată a camerei, compoziții complicate ale scenelor, sincronizarea precisă a evenimentelor și schimbări subtile de atmosferă, toate într-un singur prompt. Rămânem dedicați să creăm instrumente extrem de controlabile și flexibile care să te ajute să aduci la viață viziunea ta exactă. Pe lângă Text to Video, vom aduce toate modurile de control existente (Image to Video, Keyframes, Video to Video) și altele în Gen-4.5.

Gen-4.5 atinge un nivel fără precedent de acuratețe fizică și precizie vizuală. Obiectele se mișcă cu greutate și impuls realiste. Suprafețele se comportă așa cum s-ar comporta în lumea reală. Legile fizicii pot fi respectate sau ignorate, în funcție de viziunea ta. În ciuda saltului mare în capabilități, limitările rămân, cum ar fi eșecurile în raționamentul cauzal și în permanența obiectului. Credem că aceste moduri de eșec trebuie abordate pentru a avansa modelarea lumilor și lucrăm activ pentru a le rezolva.

Gen-4.5 a fost dezvoltată în întregime pe plăcile video NVIDIA în perioada inițială de cercetare și dezvoltare, pre-antrenament, post-antrenament și inferență. Am colaborat extensiv cu NVIDIA pentru a împinge limitele a ceea ce este posibil în optimizarea modelelor de difuzie video, de la eficiența antrenamentului până la viteza inferenței. Inferența modelului rulează pe plăcile grafice NVIDIA Hopper și Blackwell, oferind performanță optimizată fără a compromite calitatea. O abordare de top în industrie care permite Gen-4.5 să atingă capabilități fără precedent.

Implementăm treptat accesul la Runway Gen-4.5. Va fi disponibil pentru toată lumea în zilele următoare. Află mai multe:

Gen-4.5 a fost dezvoltat în întregime pe @nvidia GPU-uri pe parcursul cercetării și dezvoltării inițiale, pre-antrenament, post-antrenament și inferență. Am colaborat extensiv cu NVIDIA pentru a împinge limitele a ceea ce este posibil în optimizarea modelelor de difuzie video, de la eficiența antrenamentului până la viteza inferenței. Inferența modelului rulează pe plăcile grafice NVIDIA Hopper și Blackwell, oferind performanță optimizată fără a compromite calitatea. O abordare de top în industrie care permite Gen-4.5 să atingă capabilități fără precedent.

@nvidia Extindem treptat accesul la pista Gen-4.5. Va fi disponibil pentru toată lumea în zilele următoare. Află mai multe: