北京
當(dāng)?shù)貢r(shí)間10月16日，李飛飛團(tuán)隊(duì)World Labs重磅發(fā)布全新實(shí)時(shí)生成式世界模型——RTFM（Real-Time Frame Model，實(shí)時(shí)幀模型），該模型僅需單張H100 GPU，就能從輸入的2D圖像實(shí)時(shí)生成持久且3D一致的虛擬世界，讓用戶僅憑一張圖片就能創(chuàng)造完整的3D場(chǎng)景。
RTFM模型采用創(chuàng)新的"學(xué)習(xí)型渲染器"設(shè)計(jì)，不依賴傳統(tǒng)3D建模，而是通過(guò)端到端學(xué)習(xí)大規(guī)模視頻數(shù)據(jù)，直接從輸入圖像生成同一場(chǎng)景的新視角圖像。模型不僅能模擬三維幾何，還學(xué)會(huì)了反射、陰影、鏡頭光暈等復(fù)雜物理效果。
更獨(dú)特的是其"空間記憶"機(jī)制，通過(guò)為每幀圖像賦予3D空間中的位姿，使虛擬世界具備真正持久性 - 即使視線移開，場(chǎng)景也不會(huì)消失。該技術(shù)讓RTFM能夠在大型場(chǎng)景中保持無(wú)限時(shí)長(zhǎng)的交互體驗(yàn)。
目前該模型已正式開放，任何人都可通過(guò)官網(wǎng)rtfm.worldlabs.ai體驗(yàn)這款"世界模擬器"。
特別聲明：以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布，本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
