Insights KI Neuigkeiten KI LEGO Modellgenerator: Wie er reale Sets in CAD erzeugt
post

KI Neuigkeiten

05 Okt. 2026

Read 9 min

KI LEGO Modellgenerator: Wie er reale Sets in CAD erzeugt

KI LEGO Modellgenerator erstellt präzise LDraw-CAD-Dateien, damit komplexe Entwürfe prüfbar werden

Ein neuer KI LEGO Modellgenerator zeigt, wie KI aus einer einfachen Idee große LEGO-Modelle als präzise CAD-Dateien erzeugt. Die Open-Source-Toolchain LDraw Nova übersetzt Prompts in Python-Code und daraus in LDraw-Dateien. So entstehen Entwürfe mit mehr als 2.000 realen Teilen – aktuell noch ausschließlich digital. Die Open-Source-Toolchain LDraw Nova von Carlos Antelo verbindet große Sprachmodelle mit klassischen CAD-Workflows. Sie erstellt aus Textprompts programmgenerierte LDraw-Dateien, die sich in LDView, LeoCAD oder Studio öffnen lassen. Erste Highlights aus der Galerie: ein Sakura Garden mit 2.175 Teilen (Claude Opus 5.5) sowie eine Kathedrale und ein Tidal Observatory (GPT-6 Astra). Gebaut wurde bisher keines der Modelle in echt – Antelo sagt offen: Er habe es „nicht einmal versucht“.

Was der KI LEGO Modellgenerator heute kann

Der KI LEGO Modellgenerator LDraw Nova verwandelt eine Idee in einen vollständigen Bauplan. Dabei muss die KI nicht jeden Stein manuell platzieren. Stattdessen beschreibt ein Agent das Modell zunächst strukturiert und erzeugt daraus Code, der die finale LDraw-Datei schreibt.

Von Prompt zu Programm zu LDraw

– Planung: Der Agent erstellt einen JSON-Plan, der Modell und Submodelle eindeutig definiert. – Code-Phase: Aus dem Plan entsteht ein Python-Programm. – CAD-Ausgabe: Das Programm generiert LDraw-Quelltext, in dem jede platzierte LEGO-Komponente als einzelne Zeile steht. – Iteration: Das Modell wird gerendert, die KI prüft das Bild, passt Details an und rendert erneut – bis das Ergebnis überzeugt. Dieser Weg vermeidet komplexe Geometriemathik. Die Agenten sind besser darin, Python zu schreiben und per Loop nachzubessern. Ein einzelnes LDraw-File pro Modell sorgt für Kompatibilität: LDView, LeoCAD und Studio öffnen die Dateien ohne Zusatzschritte.

Beispiele aus der Galerie

– Sakura Garden (Claude Opus 5.5): Pagode, Torii, Teich und Kirschbäume – 2.175 Teile. – Atlas Crane (Opus 5.5): noch unvollendet. – Cathedral und Tidal Observatory (GPT-6 Astra). – Copper Bean Apartments (Opus 5, nicht 5.5!).

Technik-Stack und Tools im Einsatz

LDraw Nova läuft als Docker-Web-App und bindet mehrere KI-Anbieter ein: OpenAI, Anthropic und OpenRouter. Die Galerie nennt jeweils Modell und Prompt, damit Entstehung und Herkunft nachvollziehbar bleiben. Auch bei der Entwicklung halfen OpenAI’s Astra und Anthropic’s Claude Opus 5.5 mit.

Modelle und Dienste

– Frontier-Modelle liefern derzeit die besten, größten und genauesten Builds. – VR-Unterstützung für Meta Quest 3 existiert, hat aber „viele“ Performance-Probleme. – Token-Kosten: Für einen Technic-Mechanismus schätzt Antelo etwa 5 US-Dollar – stark abhängig von Prompt, Länge und Iterationen.

Suche mit jev-rerank

Für die Teile-Suche kann optional jev-rerank genutzt werden – ein semantisches Re-Ranking, gestützt von TypeSafe’s Jev System One. Ohne TypeSafe-API fällt das System auf Volltextsuche zurück. Das Jev-Modell fiel zuletzt durch automatisierte Pokémon-Red-Durchläufe auf, was seine Eignung für Entscheidungsaufgaben unterstreicht.

Grenzen, Kosten und Vergleich mit BrickGPT

Mit dem KI LEGO Modellgenerator entstehen beeindruckende, detailreiche Szenen. Doch es gibt Einschränkungen, die vor einem physischen Bau wichtig sind.

Stabilität und Physik

– Kollisionen werden gehandhabt, strukturelle Stabilität aber nicht. – Große, reale Builds erfordern das Beschaffen tausender Teile – logistisch aufwendig. – Antelo hat bislang keine der gezeigten Modelle real gebaut. Im Vergleich dazu setzt BrickGPT (ehemals LegoGPT, Carnegie Mellon University) auf ein trainiertes System mit über 47.000 LEGO-Strukturen und überprüft Entwürfe bereits während der Generierung auf Gültigkeit und physische Stabilität. Der KI LEGO Modellgenerator von Nova zielt stärker auf flexible Agentenarbeit und Programmgenerierung.

Rechenaufwand und VR

– Frontier-Modelle sind derzeit praktisch Pflicht für große, saubere Ergebnisse. – Der Prozess kostet Zeit und Rechenbudget – besonders bei mehreren Render-Iterationen. – VR ist vorhanden, aber noch nicht reif für flüssiges Arbeiten.

Vom CAD zur Realität

Noch existieren die gezeigten Modelle nur in CAD. Antelo denkt darüber nach, ein kleines Modell zu 3D-drucken. Langfristig könnten KI-Agenten sogar den Bauprozess bis hin zur Fertigung begleiten.

3D-Druck als Brücke

Über Model-Context-Protocol-Server lassen sich bereits heute Schritte automatisieren: – Kiln: Dateien hochladen und Druck starten. – OctoEverywhere: Druck überwachen, pausieren, abbrechen oder fortsetzen. So schließt sich die Lücke zwischen Code und Objekt. Dass Agenten Aufgaben per Programmierung meistern, zeigen auch andere Demos – etwa GPT-6 Astra, das World of Warcrafts Ork-Startgebiet aus einem einzigen Prompt klärte.

Ausblick: Roadmap und Potenzial

Ein Ziel sind Tools, die auch „Low-End“-Agenten schrittweise zu soliden Ergebnissen führen. Auf der To-do-Liste stehen Minifiguren sowie Technic-Maschinen und -Motoren. Mit wachsender Modellqualität, besserer Suche und einfacherem Teilezugang könnten mehr Entwürfe tatsächlich gebaut werden. Am Ende zeigt dieses Projekt, wie schnell digitale und greifbare Welt zusammenwachsen. Der KI LEGO Modellgenerator bringt Kreative, Sammler und Technikfans an einen Tisch: Ideen werden zu Code, Code zu CAD – und vielleicht bald zu echten Steinen. Wer heute mit dem KI LEGO Modellgenerator experimentiert, bereitet den Boden für morgen, wenn Agenten stabilere Modelle planen, Kosten senken und den Weg zum physischen Set noch direkter machen.

(Source: https://www.tomshardware.com/tech-industry/artificial-intelligence/open-source-tool-designs-lego-builds-with-more-than-2-000-real-pieces-their-programs-output-detailed-cad-files-but-no-models-have-been-built-yet)

For more news: Click Here

FAQ

Q: Was ist der KI LEGO Modellgenerator LDraw Nova und was macht er? A: Der KI LEGO Modellgenerator LDraw Nova ist eine Open‑Source-Toolchain, die Textprompts mithilfe großer Sprachmodelle in Python‑Programme und daraus in präzise LDraw‑CAD‑Dateien übersetzt. Damit lassen sich digitale Entwürfe mit mehreren tausend realen Teilen erzeugen. Q: Wie funktioniert der Workflow vom Prompt zur fertigen LDraw-Datei? A: Beim KI LEGO Modellgenerator erstellt ein Agent zuerst einen JSON‑Plan, der Modell und Submodelle beschreibt, dann generiert er daraus ein Python‑Programm, das den LDraw‑Quelltext schreibt. Das Modell wird gerendert, die KI prüft das Bild, passt Details an und iteriert so lange, bis das Ergebnis überzeugt. Q: Welche KI-Modelle und Dienste werden im KI LEGO Modellgenerator eingesetzt? A: LDraw Nova nutzt verschiedene KI‑Modelle wie GPT‑6 Astra, Claude Opus 5.5 und Opus 5 sowie Dienste von OpenAI, Anthropic und OpenRouter. Optional wird jev‑rerank für semantische Teile‑Suchen eingesetzt, ansonsten fällt das System auf Volltextsuche zurück. Q: Sind die im KI LEGO Modellgenerator erzeugten Modelle schon mit echten Steinen gebaut worden? A: Nein, die gezeigten Entwürfe existieren bislang nur in CAD; keiner der Modelle wurde bisher mit realen Steinen gebaut. Entwickler Carlos Antelo sagt, er habe es „nicht einmal versucht“, und reale Großbauten würden das Sammeln tausender Teile erfordern. Q: Welche technischen Grenzen und Probleme hat der KI LEGO Modellgenerator? A: Der KI LEGO Modellgenerator hat derzeit Grenzen bei der physikalischen Modellierung: Kollisionen werden zwar berücksichtigt, strukturelle Stabilität aber nicht. Außerdem sind große Builds zeit‑ und rechenaufwändig, brauchen oft Frontier‑Modelle für gute Ergebnisse und die VR‑Unterstützung für Meta Quest 3 weist Performance‑Probleme auf. Q: In welchen Programmen kann man die LDraw-Dateien des KI LEGO Modellgenerators öffnen? A: Die erzeugten LDraw‑Dateien lassen sich mit Viewer und CAD‑Tools wie LDView, LeoCAD oder Studio öffnen. Das LDraw‑Textformat speichert jede platzierte Komponente in einer Zeile und erzeugt pro Modell eine Datei. Q: Wie teuer und ressourcenintensiv ist die Nutzung des KI LEGO Modellgenerators? A: Antelo schätzt die Token‑Kosten für das Erzeugen eines Technic‑Mechanismus mit Astra grob auf etwa 5 US‑Dollar, wobei Aufwand stark von Promptlänge und Iterationen abhängt. Für große, saubere Builds sind Frontier‑Modelle und mehr Rechenzeit nötig, was den Prozess insgesamt zeit‑ und kostenintensiv macht. Q: Gibt es Möglichkeiten, CAD-Entwürfe aus dem KI LEGO Modellgenerator physisch umzusetzen? A: Es gibt bereits Brücken zur physischen Umsetzung: über Model‑Context‑Protocol‑Server kann ein Agent Dateien an 3D‑Drucker senden, wobei Tools wie Kiln Druckaufträge starten und OctoEverywhere das Drucken überwachen oder pausieren. Antelo erwägt, ein kleines Modell 3D‑zu‑drucken, und langfristig könnten Agenten oder Roboter auch beim realen Zusammenbau helfen.

Contents