Show GN: OpenClaw-Plugin, mit dem AI-Agenten Unity-/Godot-/Unreal-Editoren direkt steuern

AI-Agenten können direkt innerhalb von Game-Engines Szenen bearbeiten, Objekte erstellen und Spiele testen.

Ich habe das gebaut, weil ich ein Planungsdokument als Markdown erstellen wollte und neugierig war, wie weit ein AI-Agent damit gehen kann.

Auch von unterwegs lässt sich per Telegram Arbeit anweisen, und wenn man darum bittet, einen Screenshot zu machen und zu schicken, sendet der Agent ihn zurück.

Ich habe drei Game-Engine-Plugins für OpenClaw entwickelt:

Unity Plugin (~100 Tools)
• Erstellen, Ändern und Löschen von GameObjects/Components
• Steuerung von Transform, Physics und Material
• Steuerung des Play-Modus + Simulation von Tastatur- und Mauseingaben
• Funktioniert auch im Editor-Modus (Play-Modus nicht erforderlich)

Godot Plugin (30 Tools)
• Verwaltung von Szenen/Nodes, Bearbeitung von Ressourcen
• Editor-Steuerung, Lesen von Skripten
• Play-Modus + Eingabesimulation

Unreal Plugin (40+ Tools)
• Erstellen, Ändern und Löschen von Actors/Components
• Blueprint- und Level-Verwaltung
• Steuerung von Play/Stop/Pause + Eingabesimulation

Funktionsweise:
• Installation über den Paketmanager der jeweiligen Engine (Unity: UPM, Godot: AssetLib, Unreal: Marketplace)
• Das Plugin startet einen HTTP-Server innerhalb des Editors
• OpenClaw verbindet sich damit und stellt die Editor-API als Agenten-Tools bereit
• Per Chat „Platziere 3 Gegner-Charaktere“ → sie werden tatsächlich in der Szene platziert

Beispielhafte Anwendungsfälle:
• „Finde alle Lichter in dieser Szene und reduziere ihre Helligkeit um 50 %“
• „Erstelle ein Wandobjekt vor dem Spielercharakter“
• „Starte das Spiel, bewege dich 10 Sekunden lang mit der W-Taste und mache einen Screenshot“

Statt Code aus ChatGPT zu kopieren und einzufügen, bedient die AI den Editor direkt.

Ich habe das allein entwickelt, und alles ist Open Source (Apache 2.0).
• Unity: https://github.com/TomLeeLive/openclaw-unity-plugin
• Godot: https://github.com/TomLeeLive/openclaw-godot-plugin
• Unreal: https://github.com/TomLeeLive/openclaw-unreal-plugin

Außerdem gibt es auch spezialisierte AI-Personas für die Spieleentwicklung mit OpenClaw: https://clawsouls.ai/souls (gamedev-mentor, game-designer usw.)

Fragen oder Feedback sind willkommen.