BANG : Division de ressources 3D par dynamique éclatée générative

La création 3D a toujours été une force humaine unique, alimentée par notre capacité à déconstruire et à reconstruire des objets à l’aide de nos yeux, de notre esprit et de nos mains. Toutefois, les outils actuels de conception 3D peinent à reproduire ce processus naturel, nécessitant une expertise artistique importante ainsi qu’un effort manuel considérable. Ce papier présente BANG, une nouvelle approche générative qui relie génération 3D et raisonnement, permettant une décomposition intuitive et flexible au niveau des composants des objets 3D. Au cœur de BANG se trouve le concept de « Dynamique d’explosion générative », qui génère une séquence fluide d’états explosés pour une géométrie d’entrée, en séparant progressivement les parties tout en préservant leur cohérence géométrique et sémantique.BANG repose sur un modèle pré-entraîné à grande échelle en espace latent, fine-tuné pour la dynamique d’explosion grâce à un adaptateur léger dédié à la vue éclatée, permettant un contrôle précis du processus de décomposition. Il intègre également un module d’attention temporelle afin d’assurer des transitions fluides et une cohérence spatiale et temporelle. BANG améliore le contrôle grâce à des indicateurs spatiaux, tels que des boîtes englobantes ou des régions de surface, permettant aux utilisateurs de spécifier quelles parties doivent être décomposées et de quelle manière. Cette interaction peut être étendue à l’aide de modèles multimodaux comme GPT-4, ouvrant la voie à des manipulations 2D vers 3D plus intuitives et créatives.Les capacités de BANG s’étendent à la génération de géométries détaillées au niveau des composants, à l’attribution de descriptions fonctionnelles aux pièces, ainsi qu’à la facilitation de workflows de création et de fabrication 3D sensibles aux composants. En outre, BANG trouve des applications dans l’impression 3D, où des pièces séparables sont générées pour faciliter l’impression et le reassemblage. En somme, BANG permet une transformation fluide des concepts imaginatifs en actifs 3D détaillés, offrant une nouvelle perspective sur la création qui résonne profondément avec l’intuition humaine.