中經(jīng)記者 張靖超 北京報道

CreateAI（OTC:TSPH）近日正式發(fā)布與中國科學(xué)院自動化所共同研發(fā)的4D世界模型NeoVerse。目前，相關(guān)研究論文已在項目主頁上線，供全球開發(fā)者查閱。

據(jù)CreateAI方面介紹，該模型融合diffusion與4DGS核心技術(shù)，基于100萬段開放場景（in-the-wild）單目視頻訓(xùn)練，30秒即可完成通用4D世界模型構(gòu)建，不僅打破傳統(tǒng)4D建模對昂貴多視角數(shù)據(jù)的依賴，更實現(xiàn)“重建+生成”無限迭代閉環(huán)，相關(guān)性能在標(biāo)準(zhǔn)基準(zhǔn)測試中達(dá)業(yè)界領(lǐng)先水平。

據(jù)悉，4D 世界模型作為空間智能的演進(jìn)形態(tài)，在數(shù)字內(nèi)容創(chuàng)作、游戲開發(fā)、自動駕駛仿真及具身智能等領(lǐng)域展現(xiàn)出巨大的應(yīng)用潛力。然而，當(dāng)前的 4D 世界模型訓(xùn)練方案正面臨嚴(yán)峻的擴(kuò)展性。

作為兼具通用性與高效性的4D建模解決方案，NeoVerse可全面覆蓋影視制作、具身智能、自動駕駛等各類場景，支持4D重建、精準(zhǔn)漫游、多視角生成、視頻編輯、三維點跟蹤等多元應(yīng)用，推動4D技術(shù)從“專用”走向“通用”，加速其在各行業(yè)的落地普及。

“NeoVerse是我們與中國科學(xué)院自動化所產(chǎn)學(xué)研協(xié)同的重要成果，更是用技術(shù)解決行業(yè)痛點的又一次實踐?！盋reateAI首席科學(xué)家王峰表示，“大模型訓(xùn)練依賴于可擴(kuò)展的（scalable）海量數(shù)據(jù)，而多目或4D數(shù)據(jù)過于昂貴導(dǎo)致世界模型的發(fā)展速度受限。我們提出的Feedforward 4D Gaussian重建加Diffusion生成的方法，通過單目視頻即可高效地合成大量的4D數(shù)據(jù)，為4D世界模型的建立鋪平了道路。”

此次發(fā)布的NeoVerse模型支持強(qiáng)大的蒸餾LoRAs（distillation LoRAs）擴(kuò)展，在單張顯卡上可實現(xiàn)低于30秒的快速推理，具備優(yōu)異的產(chǎn)業(yè)級應(yīng)用潛力。

（編輯：吳清 審核：李正豪 校對：翟軍）