Reedel uurisid alates NVIDIA teatas Magic3D – tehisintellekti mudel, mis suudab tekstiliste kirjelduste põhjal genereerida 3D-mudeleid. Pärast vihje sisestamist, näiteks "Vesiroosil istuv sinine mürkkonn", loob Magic3D umbes 40 minutiga värvilise tekstuuriga XNUMXD-võrgumudeli. Muudatustega saab saadud mudelit kasutada videomängudes või CGI-vormingus kunstistseenides.
Oma teaduslikus artiklis NVIDIA näeb Magic3D-s vastust DreamFusionile, teksti-3D-mudelile, mille Google'i teadlased septembris teatasid. Nii nagu DreamFusion kasutab tekstist pildiks mudelit, et luua 2D-kujutis, mis seejärel optimeeritakse mahulisteks NeRF-i (neuraalse kiirgusvälja) andmeteks, kasutab Magic3D kaheetapilise protsessi, mis võtab madala eraldusvõimega loodud umbkaudse mudeli ja optimeerib selle kõrgem eraldusvõime. Artikli autorite sõnul suudab saadud Magic3D meetod genereerida kolmemõõtmelisi objekte kaks korda kiiremini kui DreamFusion.
Magic3D suudab ka 3D-võrke käigupealt redigeerida. Madala eraldusvõimega 3D-mudeli ja lihtsa tööriistaspikri abil saate teksti muutmiseks tulemuseks oleva mudeli muutmiseks. Magic3D demonstreerib ka sama süžee säilimist mitme põlvkonna jooksul (seda mõistet nimetatakse sageli koherentsiks) ja 2D-kujutise (näiteks kubistliku maali) rakendamist 3D-mudelile.
NVIDIA ei avaldanud oma uurimistööga ühtegi Magic3D koodi.
Võimalus luua tekstist 3D-d näib olevat loomulik areng tänapäevastes difusioonimudelites, mis kasutavad närvivõrke uue sisu sünteesimiseks pärast intensiivset andmemassiivi treenimist. Alles 2022. aastal nägime võimsate tekstist pildiks muutmise mudelite, nagu DALL-E ja Stable Diffusion, ning Google'i ja Meta algeliste tekstist videoks generaatorite tekkimist.
Mis puutub Magic3D-sse, siis selle taga olevad teadlased loodavad, et see võimaldab kõigil luua 3D-mudeleid ilma eriväljaõppeta. Pärast viimistlemist võib tulemuseks olev tehnoloogia kiirendada videomängude (ja virtuaalreaalsuse) arengut ning võib lõpuks leida kasutust filmide ja televisiooni eriefektides. Oma artikli lõpus kirjutavad nad: "Loodame, et Magic3D abil suudame 3D-sünteesi demokratiseerida ja avada igaühe loominguline potentsiaal 3D-sisu loomisel."
Saate aidata Ukrainal võidelda Vene sissetungijate vastu. Parim viis selleks on annetada raha Ukraina relvajõududele läbi Päästa elu või ametliku lehe kaudu NBU.
Loe ka:
- Rootsis õppisid nad 3D-printeritel mikroelektroonikat printima
- Tolmu saab kasutada 3D-printimiseks Marsil