CAD-SIGNet : Inférence du langage CAD à partir de nuages de points en utilisant l'attention guidée par des instances de croquis couche par couche

L'ingénierie inverse dans le domaine de la Conception Assistée par Ordinateur (CAO) a toujours été une ambition, bien qu'elle ne soit pas encore entièrement réalisée. Son objectif principal est de découvrir le processus de CAO derrière un objet physique à partir de sa numérisation 3D. Nous proposons CAD-SIGNet, une architecture entraînable de bout en bout et auto-régressive pour retracer l'historique de conception d'un modèle de CAO représenté par une séquence de croquis et d'extrusions à partir d'un nuage de points en entrée. Notre modèle apprend des représentations visuelles-langage par l'attention croisée couche par couche entre le nuage de points et l'embedding langagier de la CAO. En particulier, un nouveau module d'Attention Guidée par Instance de Croquis (Sketch instance Guided Attention - SGA) est proposé afin de reconstruire les détails fins des croquis. Grâce à sa nature auto-régressive, CAD-SIGNet ne se contente pas de reconstruire une historique complète et unique du modèle de CAO correspondant à partir d'un nuage de points en entrée, mais fournit également plusieurs options plausibles pour la conception. Cela permet des scénarios interactifs d'ingénierie inverse en offrant aux concepteurs plusieurs choix possibles pour la prochaine étape tout au long du processus de conception. Des expériences approfondies sur des jeux de données publics de CAO mettent en évidence l'efficacité de notre approche face aux modèles baselines existants dans deux configurations : la récupération complète de l'historique de conception et l'auto-complétion conditionnelle à partir des nuages de points.