Stability AI lançon modele të reja që i kthejnë imazhet në video 3D

Stability AI po lëshon dy versione të një modeli të ri gjenerues të AI të quajtur Stable Video 3D (SV3D). Të dy versionet mund t’i kthejnë kërkesat e imazhit në “rrjeta” video 3D që mund të tregojnë një pamje “orbitale” 360 gradë të një objekti, ndërsa versioni më i avancuar mund të përfshijë gjithashtu “shtigje të specifikuara të kamerës” në gjenerimin e tij të videos, sipas kompanisë.

foto

Një postim në blog nga Stability AI tregon se si modeli është projektuar për të nxjerrë video modele 3D të objekteve si aksesorët e modës dhe kafshët lodrash pa iu dhënë imazhe të subjektit nga të gjitha këndet.

foto

“Kjo është bërë e mundur kryesisht nga para-trajnimi në shkallë të gjerë i modeleve gjeneruese që mundëson përgjithësim të mjaftueshëm në fusha të ndryshme,” shkruajnë studiuesit e Stability AI në raportin e tyre. Stable Video 3D bazohet në Stable Video Diffusion, i cili u lëshua në fund të vitit të kaluar dhe u trajnua në grupe të dhënash masive si LAION dhe LVD, sipas raportit të kërkimit. SV3D më pas u trajnua më tej në një version të rafinuar të grupit të të dhënave ” Objaverse “, i cili përbëhet nga një gamë masive objektesh 3D.

Modelet e reja Stable Video 3D tashmë po ofrohen për përdorim komercial përmes një anëtarësimi me pagesë në Stability, ose mund të shkarkohen falas për përdorim jo komercial. Në një intervistë me VentureBeat, Udhëheqësi i Kërkimit të Stabilitetit AI, Varun Jampani, sugjeroi se modeli i ri mund të përdoret në zhvillimin e lojërave ose në tregtinë elektronike.

“Stable Video 3D është një mjet i vlefshëm për gjenerimin e aseteve 3D, veçanërisht brenda sektorit të lojërave,” tha Jampani për VentureBeat. “Përveç kësaj, mundëson prodhimin e videove orbitale 360 ​​gradë, të cilat janë të dobishme në tregtinë elektronike, duke ofruar një përvojë blerjeje më gjithëpërfshirëse dhe ndërvepruese.”

Sidoqoftë, vlen të përmendet se AI mund të mos gjenerojë objekte që janë krejtësisht të sakta me atë që mund të blejë një klient nëse interpretimi i AI bëhet pas produktit. Duke marrë parasysh se SV3D ishte trajnuar mbi objekte, është gjithashtu e paqartë nëse do të ishte në gjendje të trajtonte imazhet e njerëzve – dhe çfarë mund të krijonte si rezultat.

Stabiliteti AI është i njohur kryesisht për gjeneratorin e saj kryesor të imazhit, Stable Diffusion . Në fillim të këtij muaji, rivali i AI Midjourney ndaloi të gjithë punonjësit e Stability AI nga platforma e tij pasi pretendoi se stafi i Stabilitetit dyshohet se kishte vendosur “aktivitet të ngjashëm me botnet” për të fshirë të dhënat e Midjourney.