SynCity AI tạo ra thế giới trò chơi 3D từ văn bản đơn giản

Sẽ thế nào nếu bạn có thể xây dựng một tổng thể Thế giới 3D chỉ bằng cách nhập mô tả văn bản? SynCity là một công cụ AI mới nhằm mục đích biến điều này thành hiện thực. Đây là một hệ thống không cần đào tạo, tạo ra thế giới 3D từ các lời nhắc văn bản đơn giản. Nghĩa là, SynCity là một trình tạo thế giới 3D từ văn bản không cần bất kỳ đào tạo nào trước khi có thể sử dụng. Những gì nó đang làm là hỗ trợ những người sáng tạo xây dựng môi trường ảo hiệu quả hơn và ít nỗ lực hơn. Là một nhà phát triển trò chơi và Nhà thiết kế VR, điều này có nghĩa là xây dựng những cảnh quay ly kỳ mà không cần phải làm mọi thứ bằng tay.

SynCity là gì?

Thành phố đồng bộ về cơ bản là một trình tạo thế giới 3D văn bản được hỗ trợ bởi trí tuệ nhân tạo. Không giống như một số công cụ trước đây chỉ có thể tạo ra các đối tượng 3D đơn lẻ, nó có thể tạo ra toàn bộ cảnh hoặc cảnh quan thành phố trong một lần. Và đây là điều thú vị: nó không cần bất kỳ đào tạo bổ sung nào về dữ liệu mới để thực hiện việc này. Trình tạo 3D SynCity tận dụng các mô hình được đào tạo trước (loại đã biết cách tạo hình ảnh và hình dạng 3D) và kết hợp chúng một cách khéo léo. Kết quả là một thế giới 3D phức tạp, mạch lạc được tạo ra từ một lời nhắc văn bản đơn giản, hoàn chỉnh với phong cách và chi tiết nhất quán trên toàn bộ cảnh. Và vâng, những thế giới được tạo ra này không phải là ảnh chụp nhanh tĩnh – bạn thực sự có thể di chuyển một camera ảo xung quanh và khám phá chúng một cách tự do như không gian 3D thực sự.

SynCity AI hoạt động như thế nào?

SynCity AI sử dụng một đường ống nhiều bước để tạo ra thế giới 3D hoàn chỉnh. Nó không tạo ra toàn bộ thế giới cùng một lúc. Thay vào đó, nó xây dựng từng phần của cảnh hoặc từng ô, đảm bảo từng phần khớp với nhau. Phương pháp này mang lại nhiều quyền kiểm soát đối với bố cục và chi tiết của thế giới.

Nó sử dụng một cách tiếp cận dựa trên gạch để xây dựng thế giới. Mỗi ô đầu tiên được tạo thành hình ảnh (gợi ý 2D), sau đó chuyển thành mô hình 3D (gợi ý 3D) và cuối cùng được pha trộn với các ô lân cận thành thế giới đầy đủ (pha trộn 3D). Hình ảnh trên minh họa cho đường ống này: bắt đầu từ lời nhắc văn bản đến ô 2D, sau đó đến ô 3D và khâu liền mạch vào cảnh 3D lớn hơn.

Để phân tích từng bước, cách thức hoạt động như sau:

Yêu cầu 2D (Tạo ô hình ảnh): Nó bắt đầu bằng cách tạo một hình ảnh 2D cho một phần của thế giới (một "ô"). Nó sử dụng một mô hình tạo hình ảnh được đào tạo trước gọi là Flux. Hệ thống lấy lời nhắc văn bản và bất kỳ ô lân cận nào hiện có làm ngữ cảnh. Sử dụng Flux với phương pháp tô màu, nó sẽ tô ô mới sao cho phù hợp với mô tả và thẳng hàng với các khu vực liền kề. Nói một cách đơn giản, nó vẽ một phần nhỏ của thế giới, đảm bảo các cạnh sẽ kết nối đẹp mắt với những gì đã có ở đó.

Chuyển đổi 3D (Hình ảnh thành ô 3D): Tiếp theo, nó chuyển đổi hình ảnh ô 2D đó thành mô hình 3D thực tế. Nó sử dụng một công cụ có tên là TRELLIS cho giai đoạn này. TRELLIS là một trình tạo hình ảnh thành 3D được đào tạo trước. Về cơ bản, nó lấy hình ảnh 2D và cung cấp cho nó chiều sâu và khối lượng, tạo ra một ô 3D. Trước khi chuyển đổi, nó có thể điều chỉnh ô (ví dụ, trích xuất tiền cảnh và thêm một đế) để TRELLIS có thể tạo ra một khối 3D rắn chắc của thế giới. Sau bước này, chúng ta có một ô không chỉ là một hình ảnh phẳng, mà là một phần địa hình hoặc kiến ​​trúc 3D mà bạn có thể đi bộ xung quanh.

Pha trộn và khâu (Gộp các ô): Bây giờ, ô 3D mới phải được đặt vào thế giới hiện tại. Hệ thống "khâu" ô mới với các ô lân cận để không có đường nối nào có thể nhìn thấy. Hệ thống thực hiện điều này bằng cách hiển thị các ranh giới nơi ô mới gặp các ô khác và sau đó sử dụng mô hình inpainting hình ảnh để pha trộn chúng. Nói cách khác, hệ thống sẽ lấp đầy mọi khoảng trống hoặc sự không khớp ở các cạnh, do đó quá trình chuyển đổi trông mượt mà ở dạng 2D. Sau đó, hệ thống đưa kết quả pha trộn này trở lại trình tạo 3D (TRELLIS) để tinh chỉnh hình học 3D thực tế tại đường nối. Điều này đảm bảo các mảnh 3D vật lý ghép lại liền mạch mà không có vết nứt hoặc vết lồi lõm lạ. Cuối cùng, ô 3D mới được thêm vào thế giới, được tích hợp hoàn toàn như một phần của cảnh quan 3D liên tục.

Hệ thống lặp lại quy trình này từng ô một. Mỗi lần tạo ô sẽ xem xét bối cảnh của toàn cảnh, do đó bạn có thể tiếp tục mở rộng thế giới. Kết quả là một môi trường 3D gắn kết được xây dựng từng phần, gần giống như một tấm chăn. Nhưng trông giống như một thế giới duy nhất, rộng lớn khi bạn khám phá nó. Cách tiếp cận này cho phép SynCity tạo ra các cảnh rất lớn nhưng vẫn mạch lạc và chi tiết.

Lợi ích của trình tạo thế giới 3D như SynCity dành cho nhà phát triển trò chơi điện tử và nhà thiết kế VR

Sử dụng SynCity có thể mang lại một số lợi ích cho các nhà phát triển trò chơi và nhà thiết kế VR:

Tiết kiệm thời gian đáng kể: Xây dựng một cấp độ trò chơi chi tiết hoặc môi trường VR từ đầu có thể mất vài tuần hoặc vài tháng. Với trình tạo SynCity 3D, phần lớn công việc này có thể được thực hiện trong một phần nhỏ thời gian. AI xử lý phần việc nặng nhọc trong việc tạo nội dung. Điều này có nghĩa là tạo mẫu thế giới trò chơi nhanh hơn và lặp lại ý tưởng nhanh hơn.

Giảm công việc mô hình hóa thủ công: SynCity AI tự động hóa các phần tầm thường của việc xây dựng thế giới. Các nhà phát triển không phải tạo mô hình từng tảng đá, ngôi nhà hoặc cây bằng tay. Công cụ này tạo ra các yếu tố đó theo mô tả văn bản. Điều này giải phóng các nghệ sĩ khỏi rất nhiều công việc tẻ nhạt và cho phép họ tập trung vào việc tinh chỉnh giao diện và cảm nhận. Nó giúp loại bỏ sự nghiền ngẫm đó.

Tăng cường khả năng sáng tạo và thử nghiệm: Vì rất dễ để tạo một cảnh bằng công cụ này (chỉ cần mô tả bằng văn bản), các nhà thiết kế trò chơi có thể thử nghiệm những ý tưởng táo bạo mà không cần đầu tư quá nhiều. Bạn có thể nhanh chóng hình dung các khái niệm môi trường khác nhau. Điều này khuyến khích thử nghiệm các chủ đề hoặc phong cách mới. Nếu bạn không thích kết quả, bạn có thể điều chỉnh lời nhắc hoặc điều chỉnh một vài ô và có phiên bản mới. Việc chuyển đổi nhanh chóng từ ý tưởng sang thế giới 3D có thể truyền cảm hứng cho nhiều sự sáng tạo và đổi mới hơn trong thiết kế.

Mở rộng quy mô cho các nhóm nhỏ hơn: Không phải studio nào cũng có một đội ngũ họa sĩ 3D lớn. Một công cụ như thế này có thể trao quyền cho các nhóm trò chơi độc lập nhỏ hoặc những người sáng tạo VR đơn lẻ để tạo ra những thế giới rộng lớn mà thông thường sẽ nằm ngoài tầm với. Công nghệ này thực hiện rất nhiều công việc nặng nhọc, vì vậy ngay cả một nhóm nhỏ cũng có thể vượt qua sức mạnh của mình trong việc sáng tạo nội dung. Nó làm giảm rào cản gia nhập để tạo ra môi trường 3D phong phú.

Tương lai của các mô hình chuyển văn bản sang 3D của SynCity AI

Dự án này là một cái nhìn thoáng qua về hướng đi của ngành công nghiệp. Mặc dù kết quả đầu ra vẫn chưa ấn tượng, giống như các mô hình AI khác, nhưng chúng có khả năng sẽ được cải thiện đáng kể trong tương lai. Ý tưởng về thế hệ "văn bản thành thế giới 3D" gần như là khoa học viễn tưởng cách đây không lâu, nhưng giờ đây nó đã trở thành hiện thực. Chúng ta đang chứng kiến ​​sự phát triển nhanh chóng của các công cụ có thể lấy một mô tả đơn giản và biến nó thành nội dung sẵn sàng cho trò chơi. SynCity AI là một trong những công cụ đầu tiên tạo ra toàn bộ thế giới theo cách này và chắc chắn sẽ không phải là công cụ cuối cùng. Trong tương lai, chúng ta có thể mong đợi công nghệ văn bản thành 3D sẽ trở nên mạnh mẽ và dễ tiếp cận hơn nữa.

Hãy tưởng tượng một nhà thiết kế màn chơi chỉ cần gõ ra tầm nhìn cho màn chơi – “một hành tinh xa lạ với những hòn đảo nổi và những khu rừng tím”. Giờ hãy tưởng tượng một AI như SynCity biến mô tả đó thành một thế giới 3D khởi đầu. Khi các thuật toán ngày càng tốt hơn, những thế giới này trở nên chi tiết hơn và đúng với tầm nhìn của nhà thiết kế. Chất lượng tài nguyên được cải thiện. Tính mạch lạc của các cảnh lớn được nâng cao. Chúng ta thậm chí có thể thấy những công cụ này được tích hợp vào các công cụ phát triển trò chơi. Tại đây, các nhà phát triển có thể tinh chỉnh Thế giới do AI tạo ra ngay trong công cụ, kết hợp tốc độ AI với sự sáng tạo của con người.

Đối với các nhà thiết kế VR, các công cụ như SynCity 3D generator mở ra khả năng tạo ra thế giới tức thời, nơi các trải nghiệm thậm chí có thể được cá nhân hóa cho từng người dùng thông qua một mô tả. Công nghệ này đang tiến triển nhanh chóng. Việc tạo nội dung từ các mô tả văn bản có thể trở thành một công cụ tiêu chuẩn trong quá trình sáng tạo cho trò chơi và VR. Những tiến bộ này cho thấy tương lai của việc xây dựng thế giới có thể tập trung ít hơn vào việc mô hình hóa tỉ mỉ. Thay vào đó, nó có thể hướng nhiều hơn đến việc hướng dẫn các công cụ thông minh bằng những ý tưởng sáng tạo.