在科技領域的又一重大突破中,昆侖萬維公司宣布成功推出Matrix-Zero世界模型,標志著中國企業在探索空間智能技術方面邁出了領先一步。這一創新成果不僅展示了將圖片轉化為可自由探索3D場景的能力,還實現了以用戶輸入為核心的可交互視頻生成。
Matrix-Zero世界模型包含兩大核心組件:一是昆侖萬維自主研發的3D場景生成大模型,該模型能將用戶提供的圖片轉化為逼真且可自由探索的3D場景。相較于現有的技術,如World Labs,Matrix-Zero不僅提供了更大的探索范圍和更高的自由度,還融入了動態物理效果,為用戶帶來更加沉浸式的體驗。二是可交互視頻生成大模型,這一模型能夠根據用戶的實時輸入生成互動視頻,具備高度精準的action model控制,極大地豐富了視頻內容的交互性和個性化。
昆侖萬維的3D場景生成功能,憑借全局一致性和自由探索的特性,支持不同風格的圖片輸入和風格遷移,還能生成動態場景。這一技術的背后,是兩個關鍵模塊:場景布局生成模塊和紋理生成模塊。前者利用可微渲染和擴散模型技術,確保生成的3D場景布局與輸入圖片高度一致;后者則在圖片和視頻生成模型的基礎上訓練,能夠在用戶移動時不斷補全場景中的缺失區域,確保場景在任何角度和位置都顯得合理且連貫。
昆侖萬維的可交互視頻生成大模型,建立在先進的生成式視頻模型之上,并結合了自主研發的用戶交互模塊,實現了以用戶輸入為核心驅動的空間智能視頻生成方案。這一方案不僅保持了開放領域視頻生成的能力,還顯著增強了對視頻內容中視角移動的精確控制,更好地滿足了用戶的交互需求和預期。這一技術突破,不僅拓寬了視頻內容的生成邊界,還為虛擬環境、交互式應用和沉浸式體驗提供了全新的應用場景。
昆侖萬維作為中國的AI領軍企業,一直致力于通用人工智能的實現,并持續在人工智能領域進行自主研發。近年來,公司在視覺多模態、深度學習、強化學習等關鍵技術方向上取得了顯著成果,并構建了完整的AI矩陣,包括天工AI搜索、AI音樂創作平臺Mureka、AI短劇平臺SkyReels、AI社交產品Linky以及AI游戲等。這些創新產品和應用,共同構成了“AI前沿基礎研究——基座模型——AI矩陣產品/應用”的完整產業鏈。
Matrix-Zero世界模型的推出,是昆侖萬維對未來AI技術布局的重要一步。這一創新模型不僅將賦能公司的AI游戲生產、AI短劇生產和編輯等業務,還將為用戶和開發者提供全新的平臺和工具。隨著視頻生成模型技術的不斷發展,未來游戲可能不再依賴傳統的3D引擎,許多實驗和模擬都可以在虛擬環境中進行,影視創作也將變得更加普及。昆侖萬維的這一技術突破,正引領著這一趨勢的發展。
本文鏈接:http://www.tebozhan.com/showinfo-45-10755-0.html昆侖萬維Matrix-Zero模型:重塑空間智能,引領AI新紀元
聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com