Представляем нашу новую модель видео на переднем крае, Runway Gen-4.5. Ранее известную как Whisper Thunder (также) Дэвид. Gen-4.5 является передовой и устанавливает новый стандарт качества движения генерации видео, соблюдения запросов и визуальной точности. Узнайте больше ниже.
Runway Gen-4.5 представляет собой значительные достижения как в эффективности предобучающих данных, так и в методах постобучения для видеомоделей и служит нашей новой базовой моделью для моделирования мира. Gen-4.5 набрал 1,247 очков Эло в таблице лидеров Artificial Analysis Text to Video, установив новый стандарт и превзойдя все другие AI видеомодели в мире.
Два года назад мы представили Gen-1, первую общедоступную модель генерации видео. Она позволила создать совершенно новый способ творческого самовыражения и создала новую категорию продуктов. За последние два года мы возглавили отрасль, делая видеомодели более мощными и управляемыми, начиная с значительных улучшений базовой модели и заканчивая новыми возможностями управления и общими возможностями редактирования. Сегодня мы представляем Gen-4.5 — кульминацию долгих исследований, направленных на совершенствование предобучения и постобучения видеомоделей.
Модель превосходно справляется с пониманием и выполнением сложных последовательных инструкций. Вы можете указать детальную хореографию камеры, сложные композиции сцен, точное время событий и тонкие атмосферные изменения, все это в одном запросе. Мы продолжаем стремиться к созданию высококонтролируемых и гибких инструментов, которые помогут вам воплотить ваше точное видение в жизнь. В дополнение к Text to Video, мы также добавим все существующие режимы управления (Image to Video, Keyframes, Video to Video) и многое другое в Gen-4.5.
Gen-4.5 достигает беспрецедентного уровня физической точности и визуальной четкости. Объекты движутся с реалистичным весом и инерцией. Поверхности ведут себя так, как они бы себя вели в реальном мире. Законы физики могут как наблюдаться, так и игнорироваться, в зависимости от вашего видения. Несмотря на большой скачок в возможностях, ограничения остаются, такие как сбои в причинном мышлении и постоянстве объектов. Мы считаем, что эти режимы сбоев необходимо устранить, чтобы дальше продвигать моделирование мира, и активно работаем над их решением.
Gen-4.5 был разработан полностью на графических процессорах NVIDIA на всех этапах: начальных исследованиях и разработках, предварительном обучении, постобучении и инференсе. Мы активно сотрудничали с NVIDIA, чтобы расширить границы возможного в оптимизации моделей видео-диффузии, от эффективности обучения до скорости инференса. Инференс модели выполняется на графических процессорах NVIDIA Hopper и Blackwell, обеспечивая оптимизированную производительность без ущерба для качества. Подход, не имеющий аналогов в отрасли, который позволяет Gen-4.5 достигать беспрецедентных возможностей.
Мы постепенно предоставляем доступ к Runway Gen-4.5. Он будет доступен для всех в ближайшие дни. Узнайте больше:
Gen-4.5 был разработан полностью на GPU от @nvidia на всех этапах: начальном R&D, предварительном обучении, постобучении и инференсе. Мы активно сотрудничали с NVIDIA, чтобы расширить границы возможного в оптимизации моделей видео-диффузии, от эффективности обучения до скорости инференса. Инференс модели выполняется на GPU серий NVIDIA Hopper и Blackwell, обеспечивая оптимизированную производительность без ущерба для качества. Подход, ставший первым в отрасли, который позволяет Gen-4.5 достигать беспрецедентных возможностей.
@nvidia Мы постепенно предоставляем доступ к Runway Gen-4.5. Он будет доступен для всех в ближайшие дни. Узнайте больше:
425,3K