Što je OpenAI-jev Shap-E i što može?

Tvrtke za istraživanje i implementaciju umjetne inteligencije (AI), poput OpenAI-ja, neprestano objavljuju značajke za dobrobit čovječanstva. Uz ChatGPT, DALL-E, Point-E i druge uspješne alate, OpenAI je izdao Shap-E, novi inovativni model.

Dakle, što je OpenAI-jev Shap-E i što može učiniti za vas?

Što je OpenAI-jev Shap-E?

U svibnju 2023. Alex Nichol i Heewon Jun, istraživači i suradnici OpenAI-ja, objavili su papir koji najavljuje Shap-E, najnovija inovacija tvrtke. Shap-E je novi alat obučen na masivnom skupu podataka uparenih 3D slika i teksta koji može generirati 3D modele iz teksta ili slika. Slično je DALL-E, koji može stvoriti 2D slike iz teksta, ali Shap-E proizvodi 3D sredstva.

Shap-E je obučen na modelu uvjetne difuzije i 3D mapiranju imovine. Mapiranje 3D sredstava znači da Shap-E uči povezivati ​​tekst ili slike s odgovarajućim 3D modelima iz velikog skupa podataka postojećih 3D objekata. Model uvjetne difuzije generativni je model koji polazi od inačice ciljanog izlaza s bukom i postupno je usavršava uklanjanjem buke i dodavanjem detalja.

Kombinacijom ove dvije komponente, Shap-E može generirati realistične i raznolike 3D modele koji odgovaraju zadanom unosu teksta ili slike i mogu se gledati iz različitih kutova i uvjeta osvjetljenja.

Kako možete koristiti OpenAI-jev Shap-E

Shap-E nije javno objavljen kao drugi OpenAI alati, ali njegova težina modela, kod zaključivanja i uzorci dostupni su za preuzimanje na Shap-E GitHub stranica.

Možete besplatno preuzeti kod Shap-E i instalirajte ga pomoću Python naredbe pip na vašem računalu. Također vam je potreban NVIDIA GPU i CPU visokih performansi jer Shap-E zahtijeva vrlo velike resurse.

Nakon instalacije otvorite 3D slike koje ste generirali u programu Microsoft Paint 3D. Isto tako, možete pretvoriti slike u STL datoteke ako ih želite ispisati pomoću 3D pisača.

Također možete prijaviti probleme i pronaći rješenja za probleme koje su već pokrenuli drugi na stranici Shap-E GitHub.

Što možete učiniti s OpenAI-jevim Shap-E

Shap-E vam omogućuje da opišete složene ideje pomoću vizualnog prikaza ideja. Potencijalne primjene za ovu tehnologiju su neograničene, posebice zato što vizualni sadržaji obično imaju daleko dosegljivije učinke od tekstova.

Kao arhitekt, možete koristiti Shap-E za izradu 3D modela zgrada i struktura na temelju pisanih opisa. Možete odrediti dimenzije struktura, materijale, boje i stilove pomoću jednostavnih rečenica. Na primjer, možete ga zatražiti s: "Napravite neboder sa 60 katova i staklenim balustradama" i eksportirati rezultat(e) u drugi softver za daljnje uređivanje ako vam se sviđaju rezultati koje dobijete.

Igrači i umjetnici animacije mogu poboljšati virtualna okruženja i vizualna iskustva stvaranjem detaljnih 3D objekata i likova. U inženjerstvu možete opisati komponente, specifikacije i funkcije strojeva i opreme i dobiti rezultate u 3D modelima prije izrade fizičkih prototipova.

Štoviše, čak iu područjima kao što je obrazovanje, Shap-E može pomoći nastavnicima da svojim učenicima prenesu složene i apstraktne ideje u predmetima poput biologije, geometrije i fizike.

Iako je još u tijeku, Shap-E je korak ispred OpenAI-a TOČKA-E, koji proizvodi 3D oblake točaka na temelju tekstualnih upita. Oblaci točaka ograničeni su u svojoj ekspresivnosti i rezoluciji, često stvaraju mutne ili nepotpune oblike.

Generirajte 3D modele koristeći OpenAI Shap-E

Shap-E je impresivna demonstracija moći umjetne inteligencije za stvaranje 3D sadržaja iz prirodnog jezika ili slika. Pomoću njega možete stvarati 3D objekte za računalne igre, interaktivna VR iskustva, prototipove i druge svrhe. Iako nema jamstava u pogledu kvalitete ispisa, AI model vam pruža brz i učinkovit način za stvaranje 3D modela bilo čega.

Osim toga, ovaj AI model važan je doprinos prostoru dubokog učenja i vjerojatno će dovesti do budućih naprednih inovacija i kreacija.