KI-Tool repariert 3D-Modelle vor dem Druck

Ein Forscherteam der MIT-CSAIL, von Google und der Northeastern University hat mit InstructMesh eine neue KI-gestützte Schnittstelle vorgestellt, die das Design und die Fertigung funktionaler 3D-Modelle deutlich vereinfacht. Das Tool adressiert ein grundlegendes Problem generativer 3D-KI: Während diese Systeme ästhetische Formen präzise abbilden, berücksichtigen sie oft keine physikalischen oder funktionalen Anforderungen, was zu druckunfähigen Konstruktionen führt. InstructMesh schließt diese Lücke, indem es visuelle Generierungsmodelle mit linguistischer Logik kombiniert und Laien sowie Experten ermöglicht, Entwürfe gezielt zu korrigieren und anzupassen. Die technische Architektur koppelt das 3D-Generierungssystem TRELLIS von Microsoft mit dem Large Language Model GPT-4. Dadurch entsteht ein interaktiver Arbeitsprozess, bei dem Nutzer Designanfragen oder Korrekturhinweise in natürlicher Sprache eingeben. Das System verarbeitet diese Befehle im latenten Raum des Generierungsmodells und übersetzt sie in präzise geometrische Anpassungen, die zur Freigabe vorgelegt werden. Dieser Ansatz eliminiert die zuvor nötigen Kenntnisse komplexer 3D-Modellierungssoftware und ermöglicht eine direkte what you see is what you get-Herangehensweise. In unabhängigen Tests erwies sich die Wirksamkeit der Plattform: Bei der Analyse beliebiger 3D-Modelle aus öffentlichen Druckplattformen wiesen fast 80 Prozent strukturelle Mängel auf. Laien, die mit InstructMesh angewiesen wurden, diese Fehler zu lokalisieren und zu beheben, erreichten bei fachlicher Überprüfung eine Erfolgsquote von circa 90 Prozent. Das Tool wurde erfolgreich zur Fertigung funktionaler Alltagsgegenstände, personalisierter Orthesen sowie von Gehäusekonstruktionen für einfache Roboter eingesetzt. Die intuitive Bedienung via Textbefehlen und Feinjustierung über Regler erlaubt dabei hohe gestalterische Freiheit bei gleichzeitig gewählter technischer Präzision. Für die Zukunft planen die Entwickler die Integration von Augmented-Reality-Plattformen, um 3D-Entwürfe kontextbasiert und ortsunabhängig zu erstellen. Zudem sind physikbasierte Simulationen vorgesehen, die das Materialverhalten und die Stabilität von Entwürfen vor der Fertigung bewerten, sowie der Einbau der aktualisierten TRELLIS.2-Architektur für detailreichere Modellierungen. Die umfassenden Ergebnisse der Studie werden im November auf dem ACM Symposium on User Interface Software and Technology präsentiert. Gefördert durch Google und das MIT-HPI-Verbundforschungsprogramm, markiert InstructMesh einen bedeutenden Schritt hin zu zugänglicher, KI-unterstützter additiver Fertigung.