Á föstudaginn voru rannsakendur frá NVIDIA tilkynnti Magic3D - gervigreindarlíkan sem getur búið til þrívíddarlíkön úr textalýsingum. Eftir að hafa sett inn vísbendingu, eins og „Blár pílueiturfroskur situr á vatnalilju,“ býr Magic3D til 3D möskva líkan með litaáferð á um það bil 40 mínútum. Með breytingum er hægt að nota líkanið sem myndast í tölvuleikjum eða listasenum á CGI sniði.
Í vísindagrein sinni NVIDIA lítur á Magic3D sem svar við DreamFusion, texta-í-3D líkaninu sem vísindamenn Google tilkynntu í september. Rétt eins og DreamFusion notar texta-í-mynd líkan til að búa til tvívíddarmynd sem síðan er fínstillt í rúmmál NeRF (Neural Radiance field) gögn, notar Magic2D tveggja þrepa ferli sem tekur gróft líkan sem er búið til í lítilli upplausn og fínstillir það til að hærri upplausn. Að sögn höfunda greinarinnar getur Magic3D aðferðin sem myndast hefur myndað þrívídda hluti tvöfalt hraðar en DreamFusion.
Magic3D getur einnig framkvæmt klippingu á 3D möskva á flugi. Með þrívíddarlíkani í lágri upplausn og grunntóli geturðu breytt textanum til að breyta líkaninu sem myndast. Magic3D sýnir einnig varðveislu sama söguþráðsins í nokkrar kynslóðir (hugtak sem oft er kallað samhengi) og beitingu tvívíddar myndstíls (eins og kúbísts málverks) á þrívíddarlíkan.
NVIDIA gaf ekki út neinn Magic3D kóða með rannsóknarvinnu sinni.
Hæfni til að búa til þrívídd úr texta virðist vera eðlileg þróun í nútíma dreifingarlíkönum, sem nota tauganet til að búa til nýtt efni eftir mikla þjálfun á fjölda gagna. Það var ekki fyrr en árið 3 sem við sáum tilkomu öflugra texta-í-mynda módela eins og DALL-E og Stable Diffusion, auk frumlegra texta-í-vídeórafla frá Google og Meta.
Hvað Magic3D varðar, vonast rannsakendurnir á bakvið það að það geri hverjum sem er kleift að búa til þrívíddarlíkön án þess að þurfa sérstaka þjálfun. Þegar hún hefur verið hreinsuð gæti tæknin sem myndast hefur hraðað þróun tölvuleikja (og sýndarveruleika) og gæti að lokum notast við tæknibrellur fyrir kvikmyndir og sjónvarp. Í lok greinarinnar skrifa þeir: "Við vonum að með Magic3D getum við lýðræðisbundið þrívíddarmyndun og opnað fyrir sköpunarmöguleika allra við að búa til þrívíddarefni."
Þú getur hjálpað Úkraínu að berjast gegn rússnesku innrásarhernum. Besta leiðin til að gera þetta er að gefa fé til hersins í Úkraínu í gegnum Bjarga lífi eða í gegnum opinberu síðuna NBU.
Lestu líka:
- Í Svíþjóð lærðu þeir að prenta öreindatækni á þrívíddarprentara
- Hægt er að nota ryk til þrívíddarprentunar á Mars