SynCity AI Menghasilkan Dunia Permainan 3D dari Teks Sederhana

Bagaimana jika Anda bisa membangun seluruh dunia 3D hanya dengan mengetikkan deskripsi teks? SynCity adalah alat AI baru yang bertujuan membuat hal ini memungkinkan. Ini adalah sistem tanpa pelatihan yang menghasilkan dunia 3D dari prompt teks sederhana. Artinya, SynCity adalah generator dunia 3D dari teks yang tidak memerlukan pelatihan sebelumnya sebelum dapat digunakan. Apa yang dilakukannya adalah membantu kreatif dalam membangun lingkungan virtual lebih efektif dan dengan lebih sedikit usaha. Sebagai pengembang permainan dan desainer VR, ini berarti membangun adegan yang menarik tanpa harus melakukan semuanya dengan tangan.

Apa itu SynCity?

SynCity pada dasarnya adalah generator dunia 3D dari teks yang ditenagai oleh kecerdasan buatan. Tidak seperti beberapa alat sebelumnya yang hanya dapat menghasilkan objek 3D tunggal, itu dapat menghasilkan seluruh adegan atau kota dalam satu langkah. Dan ini adalah kelebihannya: itu tidak memerlukan pelatihan tambahan pada data baru untuk melakukannya. Generator 3D SynCity menggunakan model pra-pelatihan (jenis yang sudah tahu cara membuat gambar dan bentuk 3D) dan menggabungkannya dengan cerdas. Hasilnya adalah dunia 3D yang kompleks dan kohesif yang dihasilkan dari prompt teks sederhana, lengkap dengan gaya dan detail yang konsisten di seluruh adegan. Dan ya, dunia yang dihasilkan ini tidak statis – Anda dapat benar-benar memindahkan kamera virtual dan menjelajahi mereka secara bebas sebagai ruang 3D yang sebenarnya.

Bagaimana SynCity AI Bekerja?

SynCity AI menggunakan pipa multi-langkah untuk menghasilkan dunia 3D yang lengkap. Ini tidak menghasilkan seluruh dunia dalam satu langkah. Sebaliknya, itu membangun adegan secara bertahap, atau ubin demi ubin, memastikan setiap bagian sesuai dengan yang lain. Metode ini memberikan banyak kontrol atas tata letak dan detail dunia.

Ini menggunakan pendekatan berbasis ubin untuk membangun dunia. Setiap ubin pertama kali dihasilkan sebagai gambar (prompt 2D), kemudian diubah menjadi model 3D (prompt 3D), dan akhirnya diintegrasikan dengan ubin tetangga ke dalam dunia penuh (pencampuran 3D). Gambar di atas menggambarkan pipa ini: mulai dari prompt teks hingga ubin 2D, kemudian ke ubin 3D, dan menjahitnya secara mulus ke dalam adegan 3D yang lebih besar.

Untuk memecahnya langkah demi langkah, berikut adalah cara kerjanya:

Prompt 2D (Menghasilkan Ubin Gambar): Ini dimulai dengan membuat gambar 2D untuk bagian dari dunia (sebuah “ubin”). Ini menggunakan model generasi gambar pra-pelatihan yang disebut Flux. Sistem mengambil prompt teks dan ubin tetangga yang ada sebagai konteks. Menggunakan Flux dengan pendekatan inpainting, itu mengisi ubin baru sehingga sesuai dengan deskripsi dan sejalan dengan area yang ada. Dalam istilah sederhana, itu “menggambar” sepotong kecil dari dunia, memastikan tepi akan terhubung dengan baik dengan apa yang sudah ada.

Konversi 3D (Gambar ke Ubin 3D): Selanjutnya, itu mengubah gambar ubin 2D itu menjadi model 3D yang sebenarnya. Ini menggunakan alat yang disebut TRELLIS untuk tahap ini. TRELLIS adalah generator gambar-ke-3D pra-pelatihan. Pada dasarnya, itu mengambil gambar 2D dan memberinya kedalaman dan volume, menghasilkan ubin 3D. Sebelum konversi, itu mungkin menyesuaikan ubin (misalnya, mengekstrak latar depan dan menambahkan dasar) sehingga TRELLIS dapat membuat potongan 3D yang solid dari dunia. Setelah langkah ini, kita memiliki ubin yang tidak hanya gambar datar, tetapi potongan 3D dari medan atau arsitektur yang bisa Anda jelajahi.

Penggabungan dan Penyambungan (Menggabungkan Ubin): Sekarang ubin 3D baru harus ditempatkan ke dalam dunia yang ada. Sistem “menyambung” ubin baru dengan tetangganya sehingga tidak ada celah yang terlihat. Ini dilakukan dengan merender batas-batas di mana ubin baru bertemu dengan yang lain dan kemudian menggunakan model inpainting gambar untuk menggabungkannya. Dalam kata lain, itu mengisi celah atau ketidakcocokan di tepi, sehingga transisi terlihat mulus dalam 2D. Kemudian, itu memberikan hasil yang digabungkan kembali ke generator 3D (TRELLIS) untuk memperbaiki geometri 3D yang sebenarnya di celah. Ini memastikan potongan 3D yang sebenarnya bergabung secara mulus tanpa retak atau benjolan aneh. Akhirnya, ubin 3D baru ditambahkan ke dunia, sepenuhnya terintegrasi sebagai bagian dari lanskap 3D yang terus menerus.

Sistem mengulangi proses ini ubin demi ubin. Setiap generasi ubin mempertimbangkan konteks adegan secara keseluruhan, sehingga Anda dapat terus memperluas dunia. Hasilnya adalah lingkungan 3D yang kohesif yang dibangun secara bertahap, hampir seperti quilt. Tapi itu terlihat seperti dunia besar tunggal ketika Anda menjelajahinya. Pendekatan ini memungkinkan SynCity untuk menghasilkan adegan yang sangat besar yang masih kohesif dan terperinci.

Manfaat Generator Dunia 3D seperti SynCity untuk Pengembang Permainan dan Desainer VR

Menggunakan SynCity dapat menawarkan beberapa manfaat bagi pengembang permainan dan desainer VR:

Penghematan Waktu yang Dramatis: Membangun level permainan yang terperinci atau lingkungan VR dari awal dapat memakan waktu berminggu-minggu atau berbulan-bulan. Dengan generator 3D SynCity, sebagian besar dari ini dapat dilakukan dalam sebagian kecil dari waktu. AI menangani pekerjaan berat pembuatan konten. Ini berarti prototipe permainan yang lebih cepat dan iterasi ide yang lebih cepat.

Kurangnya Pekerjaan Pemodelan Manual: SynCity AI mengotomatisasi bagian membosankan dari pembangunan dunia. Pengembang tidak perlu memodelkan setiap batu, rumah, atau pohon dengan tangan. Alat menghasilkan elemen-elemen tersebut sesuai dengan deskripsi teks. Ini membebaskan seniman dari banyak pekerjaan yang membosankan dan memungkinkan mereka fokus pada penyempurnaan tampilan dan nuansa. Ini membantu menghilangkan kebosanan itu.

Peningkatan Kreativitas dan Eksperimen: Karena sangat mudah untuk membuat adegan dengan alat ini (hanya dengan mendeskripsikan dalam teks), desainer permainan dapat bereksperimen dengan ide liar tanpa investasi besar. Anda dapat dengan cepat memvisualisasikan konsep lingkungan yang berbeda. Ini mendorong mencoba tema atau gaya baru. Jika Anda tidak menyukai hasilnya, Anda dapat menyesuaikan prompt atau menyesuaikan beberapa ubin dan mendapatkan versi baru. Waktu yang singkat dari ide ke dunia 3D dapat menginspirasi lebih banyak kreativitas dan inovasi dalam desain.

Mengembangkan untuk Tim yang Lebih Kecil: Tidak semua studio memiliki tim besar seniman 3D. Alat seperti ini dapat memberdayakan tim permainan indie kecil atau pembuat VR solo untuk menghasilkan dunia yang luas yang biasanya tidak terjangkau. Teknologi melakukan banyak pekerjaan berat, sehingga bahkan tim kecil dapat melampaui kemampuan mereka dalam pembuatan konten. Ini menurunkan hambatan untuk membuat lingkungan 3D yang kaya.

Masa Depan Model 3D Text-to-SynCity AI

Proyek ini memberikan gambaran tentang ke mana industri ini menuju. Meskipun outputnya belum impresif, seperti model AI lainnya, mereka kemungkinan akan meningkat secara signifikan di masa depan. Ide “teks ke dunia 3D” generasi hampir seperti fiksi ilmiah tidak lama lagi, tetapi sekarang menjadi kenyataan. Kami melihat pertumbuhan cepat dalam alat yang dapat mengambil deskripsi sederhana dan mengubahnya menjadi konten yang siap permainan. SynCity AI adalah salah satu yang pertama untuk menghasilkan dunia secara cara ini, dan itu pasti tidak akan menjadi yang terakhir. Di masa depan, kita dapat mengharapkan teknologi teks-ke-3D menjadi lebih kuat dan mudah diakses.

Bayangkan seorang desainer level hanya mengetikkan visi untuk level – “planet alien dengan pulau terapung dan hutan ungu”. Sekarang, bayangkan AI seperti SynCity mengubah deskripsi itu menjadi dunia 3D awal. Ketika algoritma menjadi lebih baik, dunia ini menjadi lebih terperinci dan sesuai dengan visi desainer. Kualitas aset meningkat. Kohesi adegan besar ditingkatkan. Kami mungkin bahkan melihat alat ini terintegrasi ke dalam mesin permainan. Di sini, pengembang dapat menyempurnakan dunia yang dihasilkan AI langsung di dalam mesin, menggabungkan kecepatan AI dengan kreativitas manusia.

Untuk desainer VR, alat seperti generator 3D SynCity membuka kemungkinan pembangunan dunia secara langsung, di mana pengalaman bahkan dapat dipersonalisasi untuk setiap pengguna melalui deskripsi. Teknologi ini berkembang dengan cepat. Menghasilkan konten dari deskripsi teks dapat menjadi alat standar dalam proses kreatif untuk permainan dan VR. Kemajuan ini menunjukkan bahwa masa depan pembangunan dunia mungkin lebih fokus pada mengarahkan alat cerdas dengan ide inovatif. Ini menunjukkan bahwa masa depan pembangunan dunia mungkin lebih fokus pada mengarahkan alat cerdas dengan ide inovatif, bukan pada pemodelan yang teliti.