InstructMesh : l'IA qui répare et imprime des modèles 3D
Des chercheurs du MIT, de Google et de l'Université Northeastern ont développé InstructMesh, une interface d'intelligence artificielle conçue pour générer, corriger et préparer des modèles 3D à l'impression. Les systèmes actuels de génération créative produisent souvent des objets visuellement convaincants mais dénués de fonctionnalité pratique, car ils ne modélisent pas les contraintes physiques réelles. InstructMesh résout ce problème en associant le moteur de génération 3D TRELLIS à un grand modèle de langage. Cette architecture hybride permet aux utilisateurs de décrire leurs modifications en langage courant ou de cibler des zones précises du modèle pour les ajuster. Le logiciel interprète alors ces requêtes pour modifier la géométrie tout en préservant la solidité structurelle du projet. Lors d'une évaluation sur des fichiers partagés par la communauté, les chercheurs ont constaté que près de quatre-vingts pour cent des modèles présentaient des défauts. Des utilisateurs sans expérience en modélisation ont identifié et corrigé environ neuf chances sur dix de ces erreurs, grâce à des curseurs de précision et à des descriptions textuelles. Cette ergonomie démontre que le logiciel rend accessible la conception d'objets complexes, autrefois réservés aux spécialistes. L'équipe a d'ailleurs fabriqué avec succès des articles variés, dont un porte-gobelet au design organique, une attelle genouillère personnalisée et des coques fonctionnelles pour micro-robots. Les promoteurs de l'outil prévoient d'étendre ses capacités en intégrant des simulations physiques pour anticiper la résistance des matériaux et en le connectant à des casques de réalité augmentée afin de concevoir des objets adaptés au contexte spatial de l'utilisateur. Le système sera également mis à jour avec des architectures de génération plus récentes. Ce projet, dirigé par Faraz Faruqi et supervisé par la professeure Stefanie Mueller, sera officiellement présenté en novembre lors du Symposium de l'Association for Computing Machinery sur les interfaces utilisateur.
