SynCity AI 生成 3D 游戏世界从简单文本

如果你可以通过输入文本描述来构建一个完整的 3D 世界，那将会是多么的神奇？SynCity 是一个新的 AI 工具，它旨在实现这一目标。它是一个无需训练的系统，可以从简单的文本提示中生成 3D 世界。也就是说，SynCity 是一个文本到 3D 世界的生成器，它不需要任何预先的训练就可以使用。它正在帮助创意人员更有效地构建虚拟环境，并减少他们的工作量。对于游戏开发者和 VR 设计师 来说，这意味着可以在不手动创建每个细节的情况下构建激动人心的场景。

什么是 SynCity？

SynCity 本质上是一个由人工智能驱动的文本到 3D 世界的生成器。与一些只能生成单个 3D 对象的早期工具不同，它可以一次性生成整个场景或城市景观。并且，它不需要在新数据上进行额外的训练就可以做到这一点。SynCity 3D 生成器利用预训练的模型（可以生成图像和 3D 形状的模型）并巧妙地将它们组合起来。结果是从简单的文本提示中生成的复杂、连贯的 3D 世界，整个场景都具有一致的风格和细节。并且，这些生成的世界不是静态的快照——你可以在这些真实的 3D 空间中自由移动和探索。

如何工作 SynCity AI？

SynCity AI 使用多步骤的管道来生成完整的 3D 世界。它不会一次性生成整个世界。相反，它逐块或逐瓦片地构建场景，确保每个部分都能完美地拼接在一起。这种方法可以对世界的布局和细节进行大量的控制。

它使用 瓦片式方法 来构建世界。每个瓦片首先作为图像（2D 提示）生成，然后转换为 3D 模型（3D 提示），最后与相邻的瓦片融合成完整的世界（3D 融合）。上面的图表说明了这个管道：从文本提示开始，生成 2D 瓦片，然后转换为 3D 瓦片，并将其无缝地拼接到更大的 3D 场景中。

分解为步骤，这是它的工作原理：

2D 提示（生成图像瓦片）： 它首先为世界的一个部分（一个“瓦片”）创建一个 2D 图像。它使用一个名为 Flux 的预训练图像生成模型。系统接受文本提示和任何现有的相邻瓦片作为上下文。使用 Flux 和 inpainting 方法，它填充新的瓦片，使其与描述和相邻区域相匹配。在简单的术语中，它正在绘制世界的一个小部分，确保边缘将与现有部分完美地连接起来。

3D 转换（图像到 3D 瓦片）： 接下来，它将该 2D 瓦片图像转换为实际的 3D 模型。它使用一个名为 TRELLIS 的工具来完成这一步。TRELLIS 是一个预训练的图像到 3D 生成器。基本上，它接受 2D 图片并赋予其深度和体积，生成 3D 瓦片。在转换之前，它可能会调整瓦片（例如，提取前景并添加底座），以便 TRELLIS 可以创建世界的一个 3D 块。在这一步之后，我们拥有一个不仅仅是平面图像，而是一个可以在其周围行走的 3D 地形或建筑块的瓦片。

融合和拼接（合并瓦片）： 现在，新的 3D 瓦片需要被放入现有的世界中。系统“拼接”新的瓦片与其相邻的瓦片，以便没有可见的接缝。它通过渲染新的瓦片与其他瓦片相遇的边界，然后使用图像 inpainting 模型来融合它们来实现这一点。换句话说，它填充边缘的任何间隙或不匹配，并使过渡看起来平滑。然后，它将融合的结果反馈到 3D 生成器（TRELLIS）中，以完善边缘的实际 3D 几何形状。最后，新的 3D 瓦片被添加到世界中，作为连续的 3D 景观的一部分。

该系统重复此过程，逐瓦片地构建世界。每个瓦片的生成都考虑到整个场景的上下文，因此您可以继续扩展世界。结果是一个由块组成的连贯 3D 环境。它看起来像是一个单一的大世界，当您探索它时。

类似 SynCity 的 3D 世界生成器的优点

使用 SynCity 可以为游戏开发者和 VR 设计师带来多种优点：

显著的时间节省： 从头开始构建一个详细的游戏关卡或 VR 环境可能需要一个团队数周或数月的时间。使用 SynCity 3D 生成器，大部分工作可以在很短的时间内完成。AI 处理内容创建的繁重工作。这意味着游戏世界的原型开发速度更快，想法的迭代速度更快。

减少手动建模工作： SynCity AI 自动化了世界构建的单调部分。开发人员不需要手动建模每个岩石、房屋或树。该工具根据文本描述生成这些元素。这使得艺术家摆脱了大量的繁琐工作，让他们可以专注于完善外观和感觉。它有助于消除这种单调的工作。

增强创造力和实验性： 由于使用这个工具非常简单（只需描述场景），游戏设计师可以在不投入大量时间的情况下尝试疯狂的想法。您可以快速可视化不同的环境概念。这鼓励尝试新的主题或风格。如果您不喜欢结果，您可以调整提示或调整几个瓦片以获得新的版本。从想法到 3D 世界的快速转换可以激发更多的创造力和设计创新。

适用于小型团队的扩展： 并非每个工作室都有一个大型的 3D 艺术团队。像这样的工具可以使小型独立游戏团队或单独的 VR 创作者能够制作通常超出他们能力范围的广阔世界。该技术处理了大量的繁重工作，因此即使是小型团队也可以在内容创作方面发挥更大的作用。它降低了制作丰富 3D 环境的进入门槛。

SynCity AI 的文本到 3D 模型的未来

该项目是对行业未来发展的展望。虽然输出结果还不令人印象深刻，但与其他 AI 模型一样，它们很可能在未来会显著改进。文本到 3D 世界的生成概念曾经几乎是科幻小说，但现在它正在成为现实。我们正在看到可以将简单描述转换为游戏就绪内容的工具的快速增长。SynCity AI 是第一个以这种方式生成整个世界的工具，它绝不会是最后一个。在未来，我们可以期待文本到 3D 技术变得更加强大和易用。

想象一个关卡设计师，只需输入一个关卡的设想——“一个拥有浮岛和紫色森林的外星星球”。现在，想象一个像 SynCity 的 AI 将这个描述转换为一个起始的 3D 世界。随着算法的改进，这些世界变得更加详细和真实地反映设计师的设想。资产的质量得到提高，整个场景的连贯性得到增强。我们甚至可能会看到这些工具集成到游戏引擎中。在那里，开发人员可以在引擎内完善 AI 生成的世界，将 AI 的速度与人类的创造力相结合。

对于 VR 设计师来说，像 SynCity 3D 生成器这样的工具开启了即时世界生成的可能性，甚至可以根据描述为每个用户提供个性化的体验。技术正在迅速发展。从文本描述中生成内容可能会成为游戏和 VR 创作过程中的标准工具。这些进步表明，世界构建的未来可能会更少地关注精细的建模，而更多地关注指导智能工具使用创新理念。