SynCity AI Generira 3D Igrene Svijete Iz Jednostavnog Teksta

Što ako biste mogli izgraditi cijeli 3D svijet samo tako što ćete upisati tekstualni opis? SynCity je novi AI alat koji cilja omogućiti to. To je sistem bez obuke koji generira 3D svijete iz jednostavnih tekstualnih podrazuma. To znači da je SynCity generator teksta u 3D svijet koji ne zahtijeva nikakvu prethodnu obuku prije nego što se može koristiti. Ono što čini je pomaći kreativcima u gradnji virtualnih okruženja učinkovitije i s manje napora. Kao razvijač igara i VR dizajneri, to se prevodi u gradnju uzbuđujućih scena bez učinka da se sve mora raditi ručno.

Što je SynCity?

SynCity je u biti generator teksta u 3D svijet koji koristi umjetnu inteligenciju. Za razliku od nekih ranijih alata koji su mogli generirati samo jedan 3D objekt, on može proizvesti cijelu scenu ili gradski pejzaž u jednom koraku. A ovo je ključni detalj: ne zahtijeva nikakvu dodatnu obuku na novim podacima da bi to učinio. SynCity 3D generator koristi prethodno obučene modele (kao što su oni koji već znaju kako stvoriti slike i 3D oblike) i kombinira ih na pametan način. Rezultat je složen, koherentan 3D svijet generiran iz jednostavnog tekstualnog podrazuma, potpuno sa stalnim stilom i detaljima širom cijele scene. I da, ovi generirani svijeti nisu statični snimci – možete zaista pomaknuti virtualnu kameru i istražiti ih slobodno kao prave 3D prostore.

Kako SynCity AI Radi?

SynCity AI koristi višestepeni tok rada za generiranje kompletnog 3D svijeta. Ne generira cijeli svijet u jednom koraku. Umjesto toga, gradi scenu komad po komad, ili ploču po ploču, osiguravajući da svaki dio stane zajedno. Ova metoda daje mnogo kontrole nad rasporedom i detaljima svijeta.
On koristi pločni pristup za gradnju svijeta. Svaka ploča se prvo generira kao slika (2D podrazum), zatim se pretvara u 3D model (3D podrazum), a na kraju se miješa s susjednim pločama u cijeli svijet (3D miješanje). Gornja slika ilustrira ovaj tok rada: počevši od tekstualnog podrazuma do 2D ploče, zatim do 3D ploče, i šivanja u veću 3D scenu.
Da razbijemo to korak po korak:
2D Podrazum (Generiranje slike ploče): Počinje stvaranjem 2D slike za dio svijeta („ploču“). On koristi prethodno obučeni model generiranja slika zvan Flux. Sistem uzima tekstualni podrazum i postojeće susjedne ploče kao kontekst. Korištenjem Fluxa s pristupom inpaintinga, ispunjava novu ploču tako da se podudara s opisom i linija sa susjednim područjima. U jednostavnim riječima, crta mali dio svijeta, osiguravajući da se rubovi spoje lijepo s onim što već postoji.
3D Konverzija (Slika u 3D ploču): Zatim pretvara tu 2D sliku ploče u stvarni 3D model. On koristi alat zvan TRELLIS za ovu fazu. TRELLIS je prethodno obučeni generator slike u 3D. U biti, uzima 2D sliku i daje joj dubinu i volumen, proizvodeći 3D ploču. Prije konverzije, on može prilagoditi ploču (npr. izdvajajući prednji plan i dodajući bazu) tako da TRELLIS može stvoriti čvrsti 3D komad svijeta. Nakon ovog koraka, imamo ploču koja nije samo ravna slika, već komad 3D terena ili arhitekture koji biste mogli obići.
Miješanje i šivanje (Spajanje ploča): Sada nova 3D ploča mora biti smještena u postojeći svijet. Sistem „šije” novu ploču sa susjedima tako da nema vidljivih spojeva. On to čini tako što rendera granice gdje se nova ploča susreće s ostalima i zatim koristi model inpaintinga slike za miješanje. U drugim riječima, ispunjava sve praznine ili neskladnosti na rubovima, tako da prijelaz izgleda glatko u 2D. Zatim, on vraća ovaj miješani rezultat natrag u 3D generator (TRELLIS) da bi usavršio stvarnu 3D geometriju na spoju. To osigurava da se fizički 3D komadi spoje bez pukotina ili čudnih izbočina. Konačno, nova 3D ploča se dodaje svijetu, potpuno integrirana kao dio kontinuiranog 3D pejzaža.
Sistem ponavlja ovaj proces ploču po ploču. Svaka generacija ploče uzima u obzir kontekst cijele scene, tako da možete nastaviti proširivati svijet. Rezultat je koherentna 3D okolina izgrađena komad po komad, gotovo kao quilt. Ali izgleda kao jedan velik svijet kada ga istražujete. Ova metoda omogućava SynCityju da generira vrlo velike scene koje su još uvijek koherentne i detaljne.

Prednosti generatora 3D svijeta poput SynCityja za razvijače video igara i dizajnere VR-a

Korištenje SynCityja može pružiti nekoliko prednosti za razvijače igara i dizajnere VR-a:
Dramatično ušteda vremena: Izgradnja detaljnog nivoa igre ili VR okoline od nule može potrajati tjedne ili mjeseci. S SynCity 3D generatorom, veći dio toga može biti učinen u frakciji vremena. AI obrađuje tešku radnu snagu stvaranja sadržaja. To znači brže stvaranje prototipa igre i bržu iteraciju ideja.
Manje ručnog modeliranja: SynCity AI automatizira monotonne dijelove gradnje svijeta. Razvijači ne moraju modelirati svaku stijenu, kuću ili drvo ručno. Alat generira te elemente prema tekstualnom opisu. To oslobađa umjetnike od mnogog tediog rada i dopušta im da se usredotoče na usavršavanje izgleda i osjećaja. Pomaže ukloniti taj grind.
Povećana kreativnost i eksperimentiranje: Zbog toga što je tako lahko stvoriti scenu s ovim alatom (samo opišite je tekstom), dizajneri igara mogu eksperimentirati s divljim idejama bez velikog ulaganja. Možete brzo vizualizirati različite koncepte okoline. To potiče pokušaje novih tema ili stilova. Ako vam se rezultat ne sviđa, možete prilagoditi podrazum ili prilagoditi neke ploče i dobiti novu verziju. Brza okreta od ideje do 3D svijeta može inspirirati više kreativnosti i inovacija u dizajnu.
Uvećanje za manje timove: Nije svaki studio velik tim 3D umjetnika. Alat poput ovog može omogućiti malim nezavisnim timovima igara ili solo VR kreatorima da proizvedu prostrane svijete koji bi inače bili izvan dosega. Tehnologija čini veliku radnu snagu, tako da čak i mali tim može udariti iznad svoje težine u stvaranju sadržaja. To smanjuje barijeru za ulazak u stvaranje bogatih 3D okolina.

Budućnost SynCity AI-ovog teksta-u-3D modele

Ovaj projekt je pogled na gdje se industrija upučuje. Iako su izlazi još uvijek impresivni, kao i kod ostalih AI modela, vjerojatno će se znatno poboljšati u budućnosti. Ideja „tekst-u-3D svijet” generiranja bila je gotovo znanstvena fantastika prije nekoliko godina, ali sada postaje stvarnost. Vidimo brzi rast alata koji mogu uzeti jednostavni opis i pretvoriti ga u sadržaj spreman za igre. SynCity AI je jedan od prvih koji generira cijele svijete na ovaj način, i sigurno neće biti posljednji. U budućnosti možemo očekivati da će se tehnologija teksta-u-3D postati još moćnija i pristupačnija.
Zamislite dizajnera razine koji jednostavno upisuje viziju za razinu – „strani planet s plutajućim otocima i ljubičastim šumama”. Sada, zamislite AI kao SynCity koji pretvara taj opis u početni 3D svijet. Kao što se algoritmi poboljšavaju, ovi svijeti postaju detaljniji i istinitiji dizajnerovoj viziji. Kvaliteta resursa se poboljšava. Koherencija velikih scena se poboljšava. Možda čak i vidimo ove alate integrirane u engine za igre. Ovdje, razvijači mogu usavršiti AI-generirane svijete direktno unutar enginea, spajajući brzinu AI-a sa ljudskom kreativnošću.
Za dizajnere VR-a, alati poput SynCity 3D generatora otvaraju mogućnost generiranja svijeta na letu, gdje bi se iskustva mogla čak i personalizirati za svakog korisnika preko opisa. Tehnologija se brzo razvija. Generiranje sadržaja iz tekstualnih opisa moglo bi postati standardni alat u kreativnom procesu za igre i VR. Ova poboljšanja sugeriraju da će se budućnost gradnje svijeta možda usmjeriti manje na detaljno modeliranje. Umjesto toga, mogla bi se osloniti na vođenje inteligentnih alata inovativnim idejama.