熱門話題
#
Bonk 生態迷因幣展現強韌勢頭
#
有消息稱 Pump.fun 計劃 40 億估值發幣，引發市場猜測
#
Solana 新代幣發射平臺 Boop.Fun 風頭正勁
Anastasis Germanidis
聯合創始人兼首席技術官 @runwayml
擴散技術應用於一切！
我們分享了一個從預訓練的自回歸 VLM 開始的食譜，通過非常少的訓練計算和一些巧妙的退火技巧，將其轉變為 SOTA 擴散 VLM。
語言擴散的研究進展非常迅速，在我看來，這提供了一條與「全能」自回歸模型一樣有前景的統一模態的道路。
這是 @mariannearr 和 @ServerProcessor 在夏季所領導的驚人工作。
2025年9月24日
今天我們分享我們的第一項研究工作，探索語言模型的擴散：自回歸到擴散的視覺語言模型
我們通過調整現有的自回歸視覺語言模型來開發一個最先進的擴散視覺語言模型，自回歸到擴散（A2D），以實現並行擴散解碼。我們的方法使得在不從頭開始訓練的情況下，輕鬆解鎖擴散語言模型的速度與質量的權衡，通過利用現有的預訓練自回歸模型。
36.75K
熱門
排行
收藏