Představujeme náš nový model videovideí na hranici, Runway Gen-4.5. Dříve známý jako Whisper Thunder (alias David). Gen-4.5 je špičková a nastavuje nový standard v kvalitě pohybu generování videa, přesnosti a vizuální věrnosti. Více informací najdete níže.
Runway Gen-4.5 představuje významné pokroky jak v efektivitě předtrénovacích dat, tak v post-trénovacích technikách video modelů a slouží jako náš nový základní model pro světové modelování. Gen-4.5 získala 1 247 Elo bodů v žebříčku Umělé analýzy textu do videa, čímž stanovila nový standard a překonala všechny ostatní AI video modely na světě.
Před dvěma lety jsme představili Gen-1, první veřejně dostupný model generování videa. Umožnila zcela novou formu tvůrčího vyjádření a vytvořila novou kategorii produktů. Během posledních dvou let jsme vedli odvětví v tom, že video modely jsou výkonnější a lépe ovladatelné, od významných vylepšení základních modelů až po umožnění nových ovládacích prvků a obecných editačních možností. Dnes představujeme Gen-4.5 — vyvrcholení dlouhého výzkumného úsilí o zlepšení předtrénování a po tréninku video modelů.
Model vyniká v porozumění a provádění složitých, sekvenovaných instrukcí. Můžete si zadat detailní choreografii kamery, složité kompozice scén, přesné načasování událostí a jemné atmosférické změny – to vše v rámci jednoho promptu. Stále se zavazujeme vytvářet vysoce ovladatelné a flexibilní nástroje, které vám pomohou uskutečnit vaši přesnou vizi. Kromě Text to Video přineseme všechny stávající ovládací režimy (Image to Video, Keyframes, Video to Video) a další do Gen-4.5.
Gen-4.5 dosahuje bezprecedentní úrovně fyzické přesnosti a vizuální přesnosti. Objekty se pohybují s realistickou váhou a hybností. Povrchy se chovají stejně jako ve skutečném světě. Fyzikální zákony lze buď pozorovat, nebo ignorovat, v závislosti na vašem vidění. Navzdory velkému skoku ve schopnostech přetrvávají omezení, jako jsou selhání v kauzálním uvažování a trvalosti objektů. Věříme, že tyto poruchy je třeba řešit, abychom dále posunuli světové modelování, a aktivně na nich pracujeme.
Generace 4.5 byla vyvinuta zcela na NVIDIA GPU v rámci počátečního výzkumu a vývoje, předškolení, následného tréninku a inference. Úzce jsme spolupracovali s NVIDIA, abychom posunuli hranice možností optimalizace modelu difúze videa, od efektivity trénování až po rychlost inferencí. Modelová inference běží na GPU řady NVIDIA Hopper a Blackwell, což zajišťuje optimalizovaný výkon bez kompromisů v kvalitě. Přístup v oboru, který umožňuje Gen-4.5 dosáhnout bezprecedentních schopností.
Postupně rozšiřujeme přístup k ranveji Gen-4.5. V následujících dnech bude dostupný všem. Víc se uč:
Gen-4.5 byla vyvinuta výhradně na @nvidia GPU napříč počátečním výzkumem a vývojem, předtréninkem, následným trénováním a inferencí. Úzce jsme spolupracovali s NVIDIA, abychom posunuli hranice možností optimalizace modelu difúze videa, od efektivity trénování až po rychlost inferencí. Modelová inference běží na GPU řady NVIDIA Hopper a Blackwell, což zajišťuje optimalizovaný výkon bez kompromisů v kvalitě. Přístup v oboru, který umožňuje Gen-4.5 dosáhnout bezprecedentních schopností.
@nvidia Postupně zavádíme přístup k ranveji Gen-4.5. V následujících dnech bude dostupný všem. Víc se uč:
425,29K