AI i World Labs mund të gjenerojë skena interaktive 3D nga një foto e vetme

foto

World Labs, startup-i i themeluar nga pionieri i AI Fei-Fei Li, ka zbuluar projektin e tij të parë një sistem AI që mund të gjenerojë skena 3D të ngjashme me videolojërat nga një imazh i vetëm.

Shumë sisteme të AI mund ta kthejnë një foto në modele dhe mjedise 3D. Por skenat e World Labs janë unike në atë që ato janë ndërvepruese dhe të modifikueshme.

“[Teknologjia jonë] ju lejon të futeni në çdo imazh dhe ta eksploroni atë në 3D,” shkruan World Labs në një postim në blog. “Përtej imazhit të hyrjes, gjithçka gjenerohet.”

foto

Skenat e krijuara nga AI, të cilat kushdo me tastierë dhe maus mund t’i eksplorojë në një demonstrim në faqen e internetit të World Labs, duken mbresëlënëse, nëse edhe pak vizatimore. Ato janë dhënë drejtpërdrejt në shfletues dhe kanë një kamerë të kontrollueshme me një thellësi të simuluar të rregullueshme të fushës (DoF). Sa më i fortë të jetë efekti DoF, aq më të paqarta shfaqen objektet e sfondit.

Sistemi i World Labs është një pjesë e një kategorie në zhvillim të AI të quajtur ” modele botërore “. Shumë prej këtyre modeleve mund të simulojnë lojëra dhe mjedise 3D – por me probleme artifaktimi dhe qëndrueshmërie. Për shembull, modeli botëror i simulimit të Minecraft-it të startup Decart, Oasis, ka një rezolucion të ulët dhe shpejt “harron” paraqitjen e niveleve.

Në të kundërt, qasja e World Labs siguron që skenat të mbeten të njëjta pasi të krijohen dhe se ato u binden ligjeve bazë të fizikës, që do të thotë se ato kanë një ndjenjë soliditeti dhe thellësie.

Sistemi i World Labs mund të aplikojë gjithashtu efekte interaktive dhe animacione në skena, si ndryshimi i ngjyrës së objekteve dhe ndriçimi dinamik i sfondeve.

foto

“Shumica e mjeteve gjeneruese të AI bëjnë përmbajtje 2D si imazhe ose video,” shkruan World Labs. “Gjenerimi në 3D përmirëson kontrollin dhe qëndrueshmërinë. Kjo do të ndryshojë mënyrën se si ne bëjmë filma, lojëra, simulatorë dhe manifestime të tjera dixhitale të botës sonë fizike.”

Tani, sigurisht që ka vend për përmirësim. Skenat e World Labs nuk janë plotësisht të eksplorueshme – lëvizjet tuaja janë të kufizuara në një zonë të vogël. (Provoni të lëvizni jashtë tij dhe do të arrini një kufi.) Dhe ka një gabim të rastësishëm të interpretimit – për shembull, objekte që përzihen së bashku në mënyra të panatyrshme.

Por World Labs thotë se është vetëm një “parapamje e hershme”.

“Ne jemi duke punuar shumë për të përmirësuar madhësinë dhe besnikërinë e botëve tona të krijuara dhe duke eksperimentuar me mënyra të reja për përdoruesit për të ndërvepruar me ta,” shkroi startup në blog.

foto

World Labs, i cili filloi në fillim të këtij viti, ka mbledhur 230 milionë dollarë në kapital sipërmarrës nga investitorët, duke përfshirë Andreessen Horowitz (a16z), Ashton Kutcher, Intel Capital, AMD Ventures dhe Eric Schmidt. E vlerësuar në mbi 1 miliard dollarë, kompania shpreson të ketë produktin e saj të parë gati në 2025.

Përtej skenave interaktive, World Labs planifikon të ndërtojë mjete që mund të jenë të dobishme për profesionistët si artistët, projektuesit, zhvilluesit, kineastët dhe inxhinierët. Ai synon klientët duke filluar nga zhvilluesit e lojërave video deri te studiot e filmit.

“Ne tashmë kemi aftësinë për të krijuar botë virtuale, interaktive, por kushton qindra e qindra miliona dollarë dhe një ton kohë zhvillimi,” tha bashkëthemeluesi i World Labs, Justin Johnson në një episod të fundit të podcast-it a16z. “[Modelet botërore] do t’ju lejojnë jo vetëm të nxirrni një imazh ose një klip, por një botë 3D plotësisht të simuluar, të gjallë dhe interaktive.”