Inside Mirage: Der erste Echtzeit-AI-Generative-Engine für Spiele

Spiele-Engines haben immer auf die gleiche Weise funktioniert. Entwickler bauen Karten, platzieren Objekte und entwerfen Level im Voraus. Sie laden das Spiel herunter, starten es und spielen den Inhalt, den die Entwickler erstellt haben. Aber was, wenn die Spielwelt noch nicht erstellt wurde? Was, wenn sie live erstellt wird, während Sie spielen, basierend auf dem, was Sie tun oder sagen? Das ist die Idee hinter dem neuen Mirage-Spiel-Engine von Dynamicslab.

Mirage wird als erste Echtzeit-Generative-Engine der Welt bezeichnet und dreht alles, was wir über Spiel-Design wissen, auf den Kopf. Sie bewegen sich, erkunden oder geben einen Prompt ein und Mirage erstellt die Welt sofort. Es handelt sich nicht um einfaches Rauschen. Diese sind spielbare, interaktive 3D-Umgebungen, die auf Ihre Aktionen in Echtzeit reagieren.

Es ist ein Schritt vor anderen spielbaren AI-Demos, die wir bisher gesehen haben. Anstatt nur Clips oder kurze Szenen anzuzeigen, ermöglicht Mirage es Ihnen, die Welt, die es erstellt, tatsächlich zu erkunden und zu interagieren, während es sie erstellt. Es ist noch früh, und noch kein vollständiges Spiel, aber es bietet bereits einen Blick darauf, wie AI die Zukunft der Spiele verändern könnte.

Was ist Mirage?

Mirage ist eine neue Art von Spiel-Engine, die nicht auf vorher erstellten Karten oder statischen Assets angewiesen ist. Stattdessen verwendet es ein großes AI-Modell, um Spiel-Umgebungen in Echtzeit zu erstellen, während Sie mit ihm interagieren. Sie laden keine Level herunter oder laden keine festen Bereiche. Der Engine reagiert auf das, was Sie tun, und versucht, etwas Spielbares auf der Stelle zu erstellen. Dazu gehören Straßen, Gebäude, Objekte und ganze offene Räume, die um Sie herum erscheinen, während Sie durch die Welt bewegen.

Es ist nicht wie traditionelle Engines aufgebaut. Mirage hat keinen Szenen-Editor oder Asset-Packs. Alles wird vom AI erstellt, Frame für Frame, basierend auf Trainings von echten Spiel-Videos und Eingaben. Wenn Sie spielen, läuft es in der Cloud und wird an Ihren Browser gestreamt, sodass Ihre Befehle und Bewegungen ständig verarbeitet werden. Es ist eher eine interaktive Simulation als ein Spiel mit festen Regeln oder Layouts.

Mirage AI Game Engine vs Traditional Engines

Mirage ist sehr unterschiedlich von herkömmlichen Spiel-Engines wie Unity oder Unreal. Diese Engines bieten Entwicklern Tools, um Welten mit 3D-Modellen, Texturen und Skripten zu erstellen. Designer verwenden Level-Editoren, Code und Kunst-Assets, um jede Szene von Hand zu erstellen. Im Gegensatz dazu hat Mirage keine vorher erstellten Karten oder Assets – es hat nur ein AI-Gehirn, das sie auf der Stelle erstellt. Sie platzieren keine Bäume oder Häuser; das AI stellt sie sich vor.

Ein weiterer wichtiger Unterschied: Unity/Unreal-Spiele sind in der Regel festgelegt, sobald sie veröffentlicht werden (abgesehen von Erweiterungen oder Updates). Ein Mirage-Spiel kann sich jedes Mal ändern, wenn Sie es spielen. Es gibt keinen endgültigen “Inhalt”, den man beenden kann; Spieler erstellen das Spiel im Grunde selbst. Anstatt eine vorher erstellte Welt herunterzuladen, laden Spieler die Welt durch ihre Aktionen ins Leben.

Auf der technischen Seite laufen traditionelle Engines auf Ihrem Computer oder Ihrer Konsole. Mirage streamt alles von leistungsstarken Servern. Es gibt also keine schweren Hardware-Anforderungen für den Spieler – nur einen Browser.

Wie funktioniert Mirages AI-Spiel-Engine?

Mirage funktioniert, indem es ein riesiges AI-Modell in der Cloud ausführt. Sie laden nichts herunter. Sie öffnen einfach die Demo in Ihrem Browser, und sie beginnt, wie ein Video zu streamen. Im Hintergrund werden alle Bewegungen oder Befehle, die Sie erteilen, an das AI gesendet, und es reagiert, indem es den nächsten Frame des Spiels erstellt. Es funktioniert auf Frame-Ebene, sodass es auf Ihre Aktionen in Echtzeit reagiert. Das System verwendet keine vorher erstellten Assets oder Karten. Es erstellt alles auf der Stelle.

Das Modell selbst ist eine Mischung aus Transformer- und Diffusions-Architektur. Es wurde mit einer riesigen Menge an Spiel-Daten trainiert, einschließlich vollständiger Spiel-Videos und Spieler-Eingaben. Die Entwickler haben auch spezielle aufgezeichnete Sitzungen hinzugefügt, um es eine breitere Verständnis davon zu geben, wie Spiel-Umgebungen funktionieren. Im Laufe der Zeit hat das AI Muster wie Straßenkurven, Objekt-Platzierung oder Kamera-Bewegung in einer Szene gelernt.

Wenn Sie mit Mirage interagieren, indem Sie gehen, fahren oder Prompts eingeben, versucht das AI, vorherzusagen und zu erstellen, was als Nächstes kommt. Es hat ein kurzes Gedächtnis für das, was gerade passiert ist, sodass die Welt nicht völlig unverbunden erscheint. Die visuellen Effekte zielen auf Realismus ab, nicht auf stilisierte oder pixelige Ansichten. Derzeit läuft es mit etwa 16 Bildern pro Sekunde in Standardauflösung. Das ist niedrig für Spiele, aber verständlich, da es vollständige 3D-Frames in Echtzeit erstellt. Trotzdem bleibt die Erfahrung ziemlich responsiv mit wenig Latenz, was eine bemerkenswerte Leistung in diesem Stadium ist.

Wie Sie Ihre Spielwelt mit Mirage erstellen können

Mirage hat eine integrierte Funktion, die es Ihnen ermöglicht, Ihre eigene Welt zu erstellen, indem Sie ein Bild hochladen (Sie können dies in der Demo hier ausprobieren). Wenn Sie die Demo öffnen, sehen Sie ein Panel mit der Überschrift “Initial Images” auf der rechten Seite. Hier können Sie entweder aus vordefinierten Bildern auswählen oder auf den grünen Upload-Button am unteren Rand klicken, um Ihr eigenes Bild hinzuzufügen.

Sobald Sie ein Bild hochladen, am besten ein Screenshot aus einem Third-Person-Spiel, und Mirage AI versucht, eine 3D-Umgebung zu erstellen, die von diesem Bild inspiriert ist. Es kopiert es nicht genau, sondern erstellt einen spielbaren Raum, der ähnlich aussieht und sich ähnlich anfühlt. Sie werden dann in die Mitte dieser neuen Welt gesetzt, bereit, sie zu erkunden.

Die grundlegenden Steuerungen sind einfach. Sie können mit WASD gehen, die Kamera mit der Maus bewegen und Shift verwenden, um zu rennen. Darüber hinaus unterstützt Mirage auch Text-Eingaben, was bedeutet, dass Sie Befehle wie “eine Autobahn hinzufügen” oder “ein Auto spawnen” während des Spiels eingeben können. Das AI wird versuchen, auf Ihre Prompts zu reagieren und die Szene entsprechend zu ändern.

Wie Echtzeit-Spiel-Generierung das Spielen verändern könnte

Wenn Mirage oder etwas Ähnliches ausgereift ist, könnte es das Spielen wirklich auf den Kopf stellen. Heute haben die meisten Spiele feste Karten, mit vielleicht einigen zufälligen Level-Generatoren (wie Roguelikes oder prozedurale Welten) oder benutzerdefinierten Mods. Mirage-Technologie bringt das auf das nächste Level: Spieler bestimmen die Welt-Erstellung live. Es ist fast, als ob man in seiner eigenen Vorstellung spielt.

Für Spieler bedeutet das, dass keine zwei Spiel-Durchläufe gleich sind. Sie könnten in ein Spiel springen, das ein bisschen wie GTA aussieht, “mache es nachts und regnerisch” sagen, und schon sind Sie in einer dunklen, stürmischen Stadt bei Nacht. Oder Sie beginnen in einem Wald, “verwandle dies in eine futuristische Stadt” sagen, und es tut es. Diese Flexibilität bedeutet, dass Spiele mehr wie Spielzeuge oder Welten zum Erkunden und Formen werden, anstatt feste Geschichten.

Community-weise senkt dies die Barrieren. Selbst ohne Design-Fähigkeiten kann jeder eine Spiel-Sitzung hosten, indem er ein Thema eingibt. Freunde könnten zusammenarbeiten (“Füge einen Drachen zu dieser Stadt hinzu”) und das AI zeichnet es für alle.

Wir sind noch weit entfernt von vollständig AI-erstellten AAA-Spielen, aber Einblicke wie Mirage deuten auf eine Zukunft hin, in der Spiele nicht heruntergeladen oder entworfen werden – sie werden imaginiert, eingeleitet und erlebt. In dieser Zukunft könnte das Spielen sich eher wie Live-Erzählung oder digitales Sandkasten-Spiel anfühlen. Anstatt dass Studios jeden Detail entwerfen, könnten Spieler ihre Abenteuer einfach mit Text träumen.

Dennoch spielen echte Spiele-Studios und -Verleger immer noch eine enorme Rolle. Für jetzt ist Mirage ein zusätzliches Werkzeug, kein Ersatz für traditionelles Spiel-Design. Es kann noch nicht mit Erzählung, ausgewogenem Kampf-Design oder Leistungs-Optimierung auf Geräten umgehen. Aber es könnte zu einem mächtigen Hilfsmittel werden: Level-Designer könnten es verwenden, um Ideen zu prototypisieren, oder Spieler könnten es für lustige Herausforderungen verwenden.