智象未來(HiDream.ai)近日釋出原生全模態互動式世界模型HiDream-O1-World,該模型支援文本、影像、互動式操控等多模態輸入,使用者可一鍵生成時空一致、符合物理規律、可長時推演的完整世界。模型具備漫遊、編輯、互動三大功能,並搭載智象自研的原生全模態(UiT)架構,該架構此次升級後在時空一致性與物理一致性兩大核心挑戰上取得關鍵突破。

在第三方評測中,HiDream-O1-World首次參評即登頂由美團LongCat團隊復旦大學聯合推出的互動式影片世界模型評測基準WBenchNavi分榜,以平均分80.9位列第一。其中,物理(Physical)維度得分73.3,一致性(Consistency)維度得分88.0,兩項關鍵指標均位居前列。WBench是業內首個面向互動式世界模型的系統性評測基準,涵蓋289個多輪互動案例、共計1058個互動輪次,基於五大維度、22項指標構建量化評測體系。Navi分榜聚焦空間導航與視角控制,被視為衡量世界模型空間理解能力的核心標尺。

智象未來CTO姚霆表示,互動式世界模型的價值不在於生成逼真的三維場景,而在於AI開始真正理解空間的深度、物體的質感、運動的慣性與光影的邏輯,這是對物理世界執行規律的系統性認知與重塑。HiDream-O1-World正是這場系統性重塑的第一道橋樑,其突破性效果堅定了智象推動原生全模態架構技術路線縱深發展的信心,也為持續構建世界模型核心技術壁壘提供了支撐。

在功能體驗上,模型提供第一人稱和第三人稱兩種視角的漫遊體驗,使用者可自由驅動角色行走並調整視角。例如在潛水場景中,視角移動時水面光影與海底碎光同步變幻,珊瑚紋理清晰,畫面穩定無漂移。同時,使用者可對畫面進行即時編輯,驅動角色完成抓取、奔跑、下蹲、跳躍等動作,或觸發降雨、物體墜落等動態事件,這些操作基於幾何、光照、材質到物理邏輯的全域性統一,確保互動真實自洽。

模型具備強大的泛化能力,支援人類、動物、虛構角色等多種角色構建,並能高度還原真實城市街景、自然地貌、室內空間等實景,也可解鎖幻想異世界、二次元卡通、3A遊戲渲染等多元藝術風格。例如在登雪山場景中,登山人行進時腳印在雪面壓出真實凹陷,雪花飄落緩急有致,遠處群山輪廓與腳下岩石紋理隨視角推移自然銜接。

互動式世界模型長期受制於空間、物理與記憶三大核心難題。動態互動中相機視角切換常引發畫面模糊畸變、場景漂移乃至空間結構紊亂;畫面中易出現人物穿牆、物體懸浮等違揹物理規律的情況;模型缺乏長效記憶,視角稍轉已生成物件便可能消失或細節飄忽。HiDream-O1-World基於自研UiT架構,通過將“3D先驗注入Memory上下文”與“Test-Time Training線上維護”協同設計,實現了長時程時空一致性。傳統世界模型如同“畫師逐幀作畫”,每次互動都要重新繪製整幅畫面,微小偏差在長序列中被不斷放大;而HiDream-O1-World則如同擁有“空間記憶”的導演,在Memory中持續記錄場景空間結構,鏡頭移動時依據記憶快速調取對應視角場景,再通過即時線上微調確保生成準確,從而在WBench一致性維度獲得88.0分。

在物理一致性方面,模型從訓練資料與推理機制兩端同時著手。訓練階段採用物理模擬資料驅動的歸納偏置學習,推理階段通過Test-Time Training線上適應物理場景,針對新物體型別或材料動態調整內部表徵,使後續生成幀符合該場景特有的物理規律,如水流動性、剛體碰撞響應等。這種“邊互動邊適應”的能力使模型在訓練資料未完全覆蓋的物理情景下仍保持較高物理合理性。在評估畫面運動是否符合常識物理的視覺合理性評測中,模型相比行業平均提升13.6%;在因果保真度評測中,對流體、碰撞、形變等物理維度全面衡量,實現12.7%的大幅躍升。

該技術路線已獲國際頂會認可,聚焦空間一致性研究的論文《DreamWorld: Geometry-Grounded Video Diffusion for 3D-Consistent World Modeling》入選2026年歐洲計算機視覺國際會議(ECCV 2026),為互動式世界模型在三維空間理解與長時序生成方向開闢了兼具理論原創性與工程可行性的技術路徑。

在產業應用層面,HiDream-O1-World正開啟三大全新格局。其一,AI互動影遊:使用者不再被動跟隨線性劇情,而是成為敘事主動參與者,世界隨探索沿不同分支劇情演進,在影視級視覺質感中獲得沉浸感並探索多重結局。其二,具身智慧模擬:模型能高效搭建高度還原、遵循物理規則的城市、工廠、室內等模擬空間,為智慧機器人訓練、自動駕駛、智慧製造提供高質量虛擬試驗底座,以智慧模擬替代高成本、高風險的實景測試。其三,3D場景生產:面向創作者與設計師,模型可生成3D手辦、家居場景及藝術空間,支援結構微調、風格秒換與智慧補全,縮短創意到成品的迭代路徑;並延伸至微觀世界,精準模擬細胞行為、蛋白相互作用等生命過程,為藥物發現與疾病機理研究開闢數字模擬路徑。

隨著開發者與創作者不斷加入,互動式世界模型的應用邊界有望遠超當前描繪的範圍。