OpenAI plašais ģeneratīvo AI rīku klāsts turpina augt.
Mākslīgā intelekta (AI) pētniecības un ieviešanas uzņēmumi, piemēram, OpenAI, nepārtraukti izlaiž funkcijas cilvēces labā. Papildus ChatGPT, DALL-E, Point-E un citiem veiksmīgiem rīkiem OpenAI ir izlaidusi jaunu novatorisku modeli Shap-E.
Tātad, kas ir OpenAI Shap-E, un ko tas var sniegt jūsu labā?
Kas ir OpenAI Shap-E?
2023. gada maijā Alex Nichol un Heewon Jun, OpenAI pētnieki un līdzstrādnieki, izdeva papīrs par Shap-E, uzņēmuma jaunākā inovācija. Shap-E ir jauns rīks, kas apmācīts, izmantojot milzīgu pārī savienotu 3D attēlu un teksta datu kopu, kas var ģenerēt 3D modeļus no teksta vai attēliem. Tas ir līdzīgs DALL-E, kas var izveidot 2D attēlus no teksta, bet Shap-E ražo 3D līdzekļus.
Shap-E ir apmācīts par nosacītās difūzijas modeli un 3D līdzekļu kartēšanu. 3D līdzekļu kartēšana nozīmē, ka Shap-E iemācās saistīt tekstu vai attēlus ar atbilstošiem 3D modeļiem no lielas esošo 3D objektu datu kopas. Nosacītā difūzijas modelis ir ģeneratīvs modelis, kas sākas no trokšņainas mērķa izvades versijas un pakāpeniski uzlabo to, noņemot troksni un pievienojot detaļas.
Apvienojot šos divus komponentus, Shap-E var ģenerēt reālistiskus un daudzveidīgus 3D modeļus, kas atbilst dotajai teksta vai attēla ievadei un kurus var apskatīt no dažādiem leņķiem un apgaismojuma apstākļiem.
Kā jūs varat izmantot OpenAI Shap-E
Shap-E nav publiskots tāpat kā citi OpenAI rīki, taču tā modeļa svars, secinājuma kods un paraugi ir pieejami lejupielādei vietnē Shap-E GitHub lappuse.
Jūs varat lejupielādēt Shap-E kodu bez maksas un instalējiet to, izmantojot Python pip komandu savā datorā. Jums ir nepieciešams arī NVIDIA GPU un augstas veiktspējas centrālais procesors, jo Shap-E ir ļoti resursietilpīgs.
Pēc instalēšanas atveriet 3D attēlus, ko ģenerējat programmā Microsoft Paint 3D. Tāpat jūs varat pārvērst attēlus STL failos ja vēlaties tos izdrukāt, izmantojot 3D printerus.
Shap-E GitHub lapā varat arī ziņot par problēmām un atrast risinājumus problēmām, kuras jau ir izvirzījuši citi.
Ko jūs varat darīt ar OpenAI Shap-E
Shap-E ļauj aprakstīt sarežģītas idejas, izmantojot ideju vizuālu attēlojumu. Šīs tehnoloģijas potenciālie pielietojumi ir neierobežoti, jo īpaši tāpēc, ka vizuālajiem materiāliem parasti ir daudz plašāki efekti nekā tekstiem.
Kā arhitekts jūs varat izmantot Shap-E, lai izveidotu ēku un būvju 3D modeļus, pamatojoties uz rakstiskiem aprakstiem. Izmantojot vienkāršus teikumus, varat norādīt struktūru izmērus, materiālus, krāsas un stilus. Piemēram, varat to parādīt, izmantojot: “Izveidojiet debesskrāpi ar 60 stāviem un stikla balustrādām” un eksportējiet rezultātu(-us) uz citu programmatūru turpmākai rediģēšanai, ja jums patīk iegūtie rezultāti.
Spēlētāji un animācijas mākslinieki var uzlabot virtuālo vidi un vizuālo pieredzi, izveidojot detalizētus 3D objektus un varoņus. Inženierzinātnēs varat aprakstīt mašīnu un iekārtu sastāvdaļas, specifikācijas un funkcijas un iegūt rezultātus 3D modeļos pirms fizisko prototipu izveides.
Turklāt pat tādās jomās kā izglītība, Shap-E var palīdzēt pedagogiem nodot skolēniem sarežģītas un abstraktas idejas tādos priekšmetos kā bioloģija, ģeometrija un fizika.
Lai gan tas joprojām ir nepabeigts darbs, Shap-E ir soli priekšā OpenAI PUNKTS-E, kas rada 3D punktu mākoņus, pamatojoties uz teksta uzvednēm. Punktu mākoņiem ir ierobežots izteiksmīgums un izšķirtspēja, bieži vien veidojot izplūdušas vai nepilnīgas formas.
Ģenerējiet 3D modeļus, izmantojot OpenAI Shap-E
Shap-E ir iespaidīgs AI jaudas demonstrējums, lai radītu 3D saturu no dabiskas valodas vai attēliem. Ar to jūs varat izveidot 3D objektus datorspēlēm, interaktīvam VR pieredzei, prototipiem un citiem mērķiem. Lai gan nav nekādu garantiju par izvades kvalitāti, AI modelis nodrošina ātru un efektīvu veidu, kā izveidot 3D modeli jebkam.
Turklāt šis AI modelis ir nozīmīgs ieguldījums padziļinātajā mācību telpā un, iespējams, nākotnē radīs progresīvus jauninājumus un jaunumus.
