World Labs Marble: Framtíðarsýn Fei-Fei Li fyrir rýmisgreind

Vísindamaðurinn sem gaf vélum getu til að sjá, kennir þeim nú að ímynda sér heila heima. Með World Labs Marble tekur Fei-Fei Li næsta skref út fyrir myndbandsgerð í viðvarandi, könnunarhæf 3D-umhverfi.

Frá ImageNet til heimslíkana

💡

Fyrir samhengi um hvernig heimslíkön passa inn í þróun AI-myndbanda, sjá yfirlit okkar yfir heimslíkön sem næstu landamæri.

Fei-Fei Li gjörbreytti tölvusjón með ImageNet, gagnasafninu sem gerði nútíma djúpnám mögulegt. Nú, eftir ár af að byggja World Labs með 230 milljón dollara fjármögnun, hefur hún kynnt Marble, fyrstu viðskiptavöru fyrirtækisins.

Kenningin er einföld: AI hefur sigrað texta, síðan myndir, síðan myndskeið. Næstu landamæri eru rýmisgreind, getan til að skynja, búa til og hafa samskipti við 3D-heima.

$230M

Fjármögnun

Verðlag

Innfædd úttak

Hvað Marble gerir

Marble býr til viðvarandi, niðurhalaða 3D-umhverfi úr mörgum inntaksgerðum:

✓Textaábendingar
✓Stakar myndir
✓Myndskeið
✓Víðsjármyndir
✓3D-uppsetningar

Ólíkt rauntíma-heimslíkönum frá keppinautum eins og Decart's Oasis eða Google's Genie, býr Marble til stöðuga heima með lágmarks afmyndun. Þú býrð til einu sinni, síðan kannar þú frjálst án þess að AI-ið "gleymir" hvað það bjó til.

Chisel-ritillinn

🔨

AI-innfædd 3D-klipping

Chisel aðskilur rýmisuppbyggingu frá sjónrænum stíl. Skipuleggðu útlitið þitt fyrst, notaðu síðan textabundna stílstýringu.

Þessi blendingsnálgun greinir Marble frá texta-í-senu líkönum. Í stað þess að vona að AI-ið skilji rýmisáform þín, skilgreinir þú rúmfræðina beinlínis. AI-ið sér um fagurfræði, efni og lýsingu.

Hugsaðu um þetta eins og að draga uppskissu af gólfplani áður en þú biður innanhússarkitekt að skreyta. Stjórn á rýmissamhengi helst þín.

Útflutningssnið og samhæfni

Búnir til heimar eru fluttir út í þremur sniðum:

Snið	Notkun
Gaussian Splats	Rauntíma-myndun, nýjar sjónarhornir
Meshes	Leikjahreyflar, CAD-samþætting
Myndskeið	Efnisframleiðsla, forsjá

💡

Allir Marble-heimar eru VR-samhæfðir með Vision Pro og Quest 3 höfuðhlífum beint.

Verðuppbygging

World Labs býður fjögur þrep:

Þrep	Verð	Framleiðslur	Lykileiginleikar
Frítt	$0	4/mánuður	Texta-, mynd- eða víðsjárinntaks
Staðlað	$20/mánuður	12/mánuður	Fjölmynda/myndskeiðsinntaks, háþróuð klipping
Pro	$35/mánuður	25/mánuður	Senustækkun, viðskiptaréttindi
Max	$95/mánuður	75/mánuður	Allar eiginleikar, hámarks framleiðslur

Fría þrepið gerir þér kleift að meta tæknina. Fyrir framleiðsluvinnu sem krefst viðskiptaréttar, táknar Pro-þrepið á $35/mánuður sanngjarnt aðgangsverð fyrir svo nýja getu.

Af hverju rýmisgreind skiptir máli

"Rýmisgreind er skilgreiningaráskorun næsta áratugar." - Fei-Fei Li

Li heldur því fram að núverandi AI hafi grundvallartakmörkun: hún rökhugar illa um 3D-rými. Tungumálalíkön halda fram eðlisfræði. Myndskeiðslíkön búa til ómögulega rúmfræði. Myndvélar eiga í erfiðleikum með samræmda rýmissamskipti.

✗Núverandi aðferðir

Myndskeiðslíkön búa til myndraðir án raunverulegrar 3D-skilnings. Myndavélahreyfingar afhjúpa ósamræmi. Hlutir skipta um stöðu eða hverfa.

✓Rýmisgreind

Innfædd 3D-framsetning gerir eðlisfræðilega samræmda heima mögulega. Færðu myndavélina frjálst. Umhverfið er viðvarandi vegna þess að það er til sem rúmfræði, ekki pixlar.

Fyrir vélmennafræði, skiptir þetta gífurlegu máli. Vélmenni sem siglir um eldhús þarf rýmisskilning, ekki myndspá. Fyrir VFX þurfa leikstjórar könnunarhæf umhverfi, ekki fastar myndavélabrautir.

Notkunartilvik taka á sig mynd

Leikir Búðu til umhverfandi umhverfi og bakgrunnsstaði. Indie-þróunaraðilar geta búið til könnunarsvæði sem myndu krefjast mánaða af hefðbundinni listaframleiðslu.

Sjónræn áhrif Forsjá verður gagnvirk. Skipuleggðu senu rýmislega, kannaðu síðan myndavélasjónarhorn áður en þú skuldbindur þig til taka.

Arkitektúr Umbreyttu gólfplönum í könnunarhæfa gangstéttir. Viðskiptavinir upplifa rými áður en bygging hefst.

Menntun Li ímyndar sér nemendur sem ganga inni í frumu, skurðlækna sem æfa inni í líffærafræðilegum hermdum.

Heimsstækkun og tónskáldahamur

Tveir eiginleikar takast á við stærðarmörk:

Heimsstækkun gerir þér kleift að stækka búinn til heim einu sinni, bæta við smáatriðum á jaðarsvæðum þar sem gæði lækka venjulega. Þetta ýtir mörkum könnunarhæfs rýmis út fyrir upphafleg mörk.

Tónskáldahamur sameinar marga heima í stærra umhverfi. Búðu til einstök herbergi, saumaðu þau síðan saman í heilstæða byggingu.

Þessi verkfæri viðurkenna núverandi takmarkanir á meðan þau veita hagnýtar lausnir.

Samkeppnislandslagið

Marble stígur inn á fjölmennt svið:

Vara	Nálgun	Aðgreiningarþáttur
Decart Oasis	Rauntíma-leikjasmíði	Gagnvirkur, en heimar breytast við könnun
Google Genie	Leikjaheimssmíði	Myndspá án raunverulegrar 3D
Odyssey	Viðvarandi heimslíkön	Fyrirtækjaáhersla
World Labs Marble	Kyrrstæð 3D-smíði	Niðurhalaður, klippilegur, VR-tilbúinn

Málamiðlunin er skýr. Rauntímalíkön eins og Oasis bjóða upp á tafarlaust en óstöðugleika. Marble forgangsraðar viðvarandi og klippileika fram yfir gagnvirkni.

Tenging við myndbandsgerð

💡

Fyrir bakgrunn um dreifingarhögun sem notuð er í rýmis-AI, sjá tæknilegt yfirlit okkar yfir dreifingumbreytendur.

Hvernig tengist 3D-heimssmíði myndböndum? Þau deila stærðfræðilegum grunni í dreifingarlíkönum, en leysa mismunandi vandamál.

Myndbandsgerð býr til tímabundnar raðir, mynd eftir mynd. Rýmis-AI býr til rúmfræðilegar framsetningar, yfirborð og rúmmál. Myndskeið svarar "hvað gerist næst?" Rýmis-AI svarar "hvað er til hér?"

Samruni punkturinn: siglingarhæf myndskeið. Búðu til 3D-heim, síðan myndaðu myndskeið þegar þú færist í gegnum hann. Þessi nálgun býður upp á myndavélastýringu ómögulega með hreinni myndbandsgerð.

Takmarkanir til að íhuga

Marble er ekki fullkomin lausn:

○Engar hreyfimyndir persónur eða kraftmikil þættir
○Framleiðslumörk geta takmarkað framleiðsluflæði
○Jaðarlækkun krefst stækkunarferða
○Aðeins kyrrstæð umhverfi

Fyrir hreyfimyndaefni þarftu enn myndskeiðslíkön. Marble skarar fram úr í umhverfi og rými, ekki leikurum eða athöfnum.

Stærri myndin

Fei-Fei Li sér rýmisgreind sem nauðsynlega fyrir AI-framfarir:

"Ég trúi að við öll höfum ábyrgð á að leiða AI í betra ástand þegar það verður öflugra. Við ættum öll að vilja að mannkynið sigri og blómstri."

Framtíðarsýn hennar nær út fyrir skemmtun. Lækningahermigerðir þar sem nemendur kanna líffærafræði. Vísindalegar myndskreytingar þar sem vísindamenn sigla um sameindalíkar uppbyggingar. Vélmenjaþjálfunarumhverfi búin til eftir ósk.

Marble er skref eitt, viðskiptasönnun á hugmynd. Rannsóknin heldur áfram í átt að kraftmeiri, gagnvirkari og eðlisfræðilega nákvæmari heimssmíði.

Byrjaðu

World Labs býður frítt þrep með 4 framleiðslum á mánuði. Nóg til að meta tæknina og skilja takmarkanir hennar.

Fyrir höfunda sem þegar vinna í 3D, samþættist mesh-útflutningsgeta við fyrirliggjandi leiðslur. Fyrir myndskeiðsframleiðendur veitir myndskeiðsútflutningur forsjárgetu ótiltæka annars staðar.

💡

Tengd lesning: Leiðbeiningar okkar um AI-myndskeiðspersónusamræmi fjalla um aðferðir til að viðhalda samhengi yfir búið efni, áskorun sem Marble tekst á við með viðvarandi 3D-framsetningu.

Umskipti frá 2D-smíði til 3D-heimssköpunar tákna grundvallarbreytingu á því sem AI getur framleitt. Marble gerir þessi umskipti aðgengileg.