由李飛飛團隊最新推出的 RTFM(Read The Field Model) 成爲當前最具突破性的3D 世界生成模型之一。該模型可在單個 NVIDIA H100GPU 上實現 交互式幀率的實時推理,成功將“3D 世界生成”從概念推向可用階段。

RTFM 最大亮點在於其具備 持久性與3D一致性 的實時運行能力。模型不僅能生成完整的3D 場景,還能在交互過程中保持幾何結構、物體位置與外觀的穩定一致,支持 反射、陰影、鏡面高光、光暈 等複雜視覺效果,逼真度堪比遊戲引擎。

與以往短時生成的3D 模型不同,RTFM 引入了“持久性記憶機制”,使其生成的虛擬世界具備長期連續性。用戶可在模型構建的3D 空間中進行 無限時長的交互探索,場景不會因視點或動作變化而消失,真正實現了“可持續存在”的 AI 世界。

業內認爲,RTFM 的問世標誌着 AI 世界模型(World Model) 向高保真實時渲染邁出關鍵一步,爲虛擬現實、遊戲引擎、機器人具身智能等領域提供了全新基礎設施。