World Labs Marble：李飛飛的空間智能願景

賦予機器視覺能力的研究者，現在正在教它們想像整個世界。透過World Labs Marble，李飛飛邁出了超越影片生成的下一步，進入持久的、可探索的3D環境領域。

從ImageNet到世界模型

💡

有關世界模型如何融入AI影片演進的背景，請參閱我們的世界模型作為下一個前沿的概述。

李飛飛透過ImageNet這個使現代深度學習成為可能的資料集，徹底改變了電腦視覺。現在，在籌集了2.3億美元資金並建構World Labs一年後，她推出了該公司的首個商業產品Marble。

論點很簡單：AI已經征服了文字，然後是圖像，再然後是影片。下一個前沿是空間智能，即感知、生成和與3D世界互動的能力。

$230M

募資金額

定價層級

原生輸出

Marble的功能

Marble從多種輸入類型生成持久的、可下載的3D環境：

✓文字提示
✓單張圖像
✓影片
✓全景圖
✓3D佈局

與Decart的Oasis或Google的Genie等競爭對手的即時世界模型不同，Marble建立的是變形最小的穩定世界。您只需生成一次，然後就可以自由探索，AI不會「忘記」它所建立的內容。

Chisel編輯器

🔨

AI原生3D編輯

Chisel將空間結構與視覺風格分離。首先勾勒出佈局，然後套用基於文字的風格指導。

這種混合方法使Marble與文字到場景模型區分開來。與其希望AI理解您的空間意圖，不如明確定義幾何形狀。AI負責處理美學、材質和照明。

可以把它想像成在請室內設計師裝飾之前先勾勒平面圖。對空間關係的控制權仍掌握在您手中。

匯出格式和相容性

生成的世界以三種格式匯出：

格式	用例
Gaussian Splats	即時算繪、新視角
網格	遊戲引擎、CAD整合
影片	內容創作、預覽

💡

所有Marble世界都與Vision Pro和Quest 3頭戴裝置開箱即用地相容VR。

定價結構

World Labs提供四個層級：

層級	價格	生成次數	主要功能
Free	$0	每月4次	文字、圖像或全景圖輸入
Standard	$20/月	每月12次	多圖像/影片輸入、進階編輯
Pro	$35/月	每月25次	場景擴展、商業權利
Max	$95/月	每月75次	所有功能、最大生成次數

免費層級讓您可以評估該技術。對於需要商業權利的製作工作，每月35美元的Pro層級代表了這種新穎能力的合理入門價格。

空間智能為何重要

「空間智能是未來十年的決定性挑戰。」- 李飛飛

李飛飛認為當前的AI存在一個根本性限制：它對3D空間的推理能力較差。語言模型會產生物理幻覺。影片模型會建立不可能的幾何形狀。圖像生成器難以處理一致的空間關係。

✗當前方法

影片模型在沒有真正3D理解的情況下生成影格序列。攝影機移動會暴露不一致性。物體會改變位置或消失。

✓空間智能

原生3D表示能夠實現物理一致的世界。自由移動攝影機。環境之所以持久，是因為它以幾何形式存在，而非像素。

對於機器人技術來說，這一點極為重要。在廚房中導航的機器人需要空間理解，而非影格預測。對於視覺特效，導演需要可探索的環境，而非固定的攝影機路徑。

成形中的使用案例

遊戲開發 生成環境氛圍和背景空間。獨立開發者可以建立需要傳統美術製作數月時間的探索區域。

視覺特效 預覽變得可互動。在空間上勾勒場景，然後在確定鏡頭之前探索攝影機角度。

建築設計 將平面圖轉換為可探索的漫遊。客戶可以在施工開始之前體驗空間。

教育李飛飛設想學生在細胞內部行走，外科醫生在解剖模擬中練習。

世界擴展和合成器模式

兩個功能解決了規模限制：

世界擴展允許您擴展生成的世界一次，為品質通常會下降的邊緣區域增加細節。這將可探索空間的邊界推向了初始生成限制之外。

合成器模式將多個世界組合成更大的環境。生成單個房間，然後將它們拼接成完整的建築。

這些工具在承認當前限制的同時提供了實用的解決方案。

競爭格局

Marble進入了一個擁擠的領域：

產品	方法	差異化因素
Decart Oasis	即時遊戲生成	可互動，但探索期間世界會變化
Google Genie	遊戲世界生成	無真正3D的影格預測
Odyssey	持久世界模型	企業重點
World Labs Marble	靜態3D生成	可下載、可編輯、VR就緒

權衡很明顯。像Oasis這樣的即時模型提供即時性但不穩定。Marble優先考慮持久性和可編輯性而非互動性。

與影片生成的聯繫

💡

有關空間AI中使用的擴散架構的背景，請參閱我們的擴散轉換器技術概述。

3D世界生成與影片有何關聯？它們在擴散模型中共享數學基礎，但解決不同的問題。

影片生成建立時間序列，逐影格生成。空間AI建立幾何表示、表面和體積。影片回答「接下來會發生什麼？」空間AI回答「這裡存在什麼？」

融合點是可導航影片。生成一個3D世界，然後在其中移動時算繪影片。這種方法提供了純影片生成無法實現的攝影機控制。

需要考慮的限制

Marble不是完整的解決方案：

✓無動畫角色或動態元素
✓生成上限可能限制製作工作流程
✓邊緣退化需要擴展通道
✓僅限靜態環境

對於動畫內容，您仍然需要影片生成模型。Marble擅長環境和空間，而非演員或動作。

更大的藍圖

李飛飛將空間智能視為AI進步的關鍵：

「我認為我們所有人都有責任在AI變得更強大時引導它進入更好的狀態。我們所有人都應該希望人類能夠勝利和繁榮。」

她的願景超越了娛樂。醫學模擬，學生探索解剖結構。科學視覺化，研究人員導航分子結構。按需生成的機器人訓練環境。

Marble是第一步，是商業概念驗證。研究繼續朝著更動態、更具互動性和物理上更準確的世界生成方向發展。

開始使用

World Labs提供免費層級，每月可生成4次。足以評估該技術並了解其限制。

對於已經從事3D工作的創作者，網格匯出功能可與現有流程整合。對於影片製作人，影片匯出提供了其他地方無法獲得的預覽功能。

💡

相關閱讀：我們的AI影片角色一致性指南涵蓋了在生成內容中保持連貫性的技術，這是Marble透過持久3D表示所解決的挑戰。

從2D生成到3D世界建立的轉變代表了AI所能產生內容的根本轉變。Marble使這一轉變變得可及。