Splats mit dem Supersplat Editor bearbeiten
Bevor es losgeht, gibt es einen kurzen Überblick über die Inhalte und Voraussetzungen dieses Tutorials. In der Videobeschreibung finden sich zudem hilfreiche Ressourcen, die einen Blick wert sind. Sobald ein oder mehrere passende Splats ausgewählt wurden, laden wir den Scan im Splat-PLY-Format für die Verwendung in der Unreal Engine herunter. Vor dem Import in die Unreal Engine müssen die Splats zunächst im Supersplat Editor aufbereitet werden – einem kostenlosen, webbasierten Tool zur Bearbeitung von Gaussian Splats.
Verwendung der Kreisauswahl
In diesem Beispiel für die Bearbeitungswerkzeuge verwenden wir die Kreisauswahl, um den Teil des Splats auszuwählen, den wir behalten möchten, und kehren dann die Auswahl um, um den Teil des Scans zu entfernen, den wir nicht benötigen.
Verwendung der Rechteckauswahl
Wir können dasselbe auch mit der Rechteckauswahl erreichen und anschließend die Auswahl umkehren, um unerwünschte Teile des Scans zu löschen. Um aus dem Supersplat Editor zu exportieren, gehen Sie auf „File“, „Export Splat“ und behalten Sie alle Standardeinstellungen bei. Dadurch stellen Sie sicher, dass Ihr Splat bereit für das Laden in die Unreal Engine ist.
Installation der Unreal Engine und Plugins
Um die Unreal Engine herunterzuladen, müssen wir zunächst den Epic Games Launcher installieren. Von dort aus können wir die Version der Unreal Engine auswählen, die wir herunterladen möchten. Stellen Sie in diesem Fall sicher, dass Sie Version 5.3.2 heruntergeladen haben. Um das Luma AI-Plugin zu Ihrem Projekt hinzuzufügen, müssen Sie zunächst auf fab.com danach suchen und es Ihrer Bibliothek hinzufügen. Jetzt können Sie das Plugin in Ihrer Fab-Bibliothek finden und in Ihrem Projekt installieren. In diesem Beispiel installieren wir es in die Unreal Engine 5.3.2. Ich verwende für dieses Beispiel die Third-Person-Vorlage, um eine Szene zu starten. Sobald die Unreal Engine geladen ist, weist Sie ein Pop-up darauf hin, dass neue Plugins verfügbar sind.
Überprüfung der Plugin-Installation
Um zu bestätigen, dass das Luma AI-Plugin installiert und aktiviert ist, suchen Sie nach „Luma AI“ und stellen Sie sicher, dass das Plugin mit einem Häkchen versehen ist. Wenn es sich um Ihre erste Installation handelt, müssen Sie den Unreal Editor neu starten, damit die Änderungen wirksam werden. Danach können Sie die ordnungsgemäße Installation des Plugins bestätigen, indem Sie erneut nach dem Namen suchen und prüfen, ob das Häkchen neben dem Plugin-Namen steht. Falls dieses Fenster nicht sofort erscheint, können Sie unter „Edit“ auf „Plugins“ gehen und dort nach dem Namen des Plugins suchen.
Importieren des Gaussian Splats in die Unreal Engine
Für dieses kurze Beispiel lösche ich einige Objekte aus der Vorlagenszene und ziehe eine der aus Supersplat heruntergeladenen PLY-Dateien per Drag-and-Drop in den Content Browser. Das Luma AI-Plugin generiert automatisch die erforderlichen Blueprints, damit die Unreal Engine das Gaussian Splat verarbeiten kann. Weitere Informationen zu den Möglichkeiten des Plugins bietet die Dokumentation, die in der Videobeschreibung verlinkt ist. Nun lässt sich der Blueprint einfach in das Level ziehen, um das Gaussian Splat anzuzeigen.
Hinzufügen von Kollisionen zu Gaussian Splats
Sie werden jedoch feststellen, dass unser Charakter-Akteur direkt durch die Karte fällt, wenn wir auf die Play-Taste drücken. Das liegt daran, dass Gaussian Splats keine Meshes sind und daher keine Kollisionen besitzen. Aber das ist kein Problem. Wir können diese mit einem kleinen Trick hinzufügen. Dafür laden wir eine GLTF-Version desselben Gaussian Splats herunter, um sie in die Unreal Engine zu importieren.
Verwendung von GLTF-Meshes für Kollisionen
Dieser GLTF-Trick liefert uns ein Static-Mesh-Objekt, für das wir Kollisionen hinzufügen und bearbeiten können. Doppelklicken Sie dazu auf das Mesh-Objekt, um die Mesh-Ansicht zu öffnen. Suchen Sie dann in der Suchleiste nach „Collision“ und stellen Sie unter „Collision Complexity“ die Option „Use Complex Collision as Simple“ ein. Hier ist eine visuelle Darstellung der einfachen und komplexen Kollisionen: Die einfache Kollision auf der linken Seite wird durch grüne Linien dargestellt, die komplexe Kollision auf der rechten Seite durch weiße Linien. Für dieses Beispiel bleiben wir bei der komplexen Kollision, da sie unserem Charakter eine präzisere Oberfläche zum Laufen bietet.
Ausrichten des Kollisions-Meshs
Nachdem die Kollision eingerichtet ist, ziehen Sie das GLTF-Mesh per Drag-and-Drop in das Level. Nutzen Sie die Funktionen zum Verschieben, Drehen und Skalieren, um das Mesh so präzise wie möglich am Splat auszurichten. Dies erfordert unter Umständen etwas Ausprobieren.
Ausblenden des Kollisions-Meshs
Sobald alles ausgerichtet ist, wählen Sie das GLTF-Mesh aus. Suchen Sie im Details-Panel nach „game“ und aktivieren Sie unter „Rendering“ die Option „Actor Hidden in Game“, um das statische Mesh auszublenden. Wenn Sie das Spiel nun starten, sehen Sie den Splat, während sich der Charakter auf dem statischen Mesh bewegt.
Erstellen filmischer Kamerabewegungen
So viel zum Einsatz in interaktiven Szenen und Spielen. Die Unreal Engine bietet jedoch auch umfangreiche Cinematic-Funktionen: Durch das Hinzufügen eines Cine Camera Actors und das Definieren von Start- und Endpositionen für eine Kamerabewegung lässt sich eine filmische Sequenz wie diese erstellen. Das war die Kurzanleitung zum Exportieren von Gaussian Splats aus Polycam für die Unreal Engine. Interesse an weiteren Videos dieser Art oder an fortgeschrittenen Anwendungsfällen in der Unreal Engine? Gerne in den Kommentaren mitteilen. Auf unserem Discord-Server und im Subreddit gibt es zudem zahlreiche spannende und inspirierende Projekte aus der Polycam-Community zu entdecken.
