Junliang Ye Shenghao Xie Ruowen Zhao Zhengyi Wang Hongyu Yan Wenqiang Zu Lei Ma Jun Zhu

Résumé

L’édition d’objets 3D est essentielle à la création interactive de contenus dans les domaines du jeu vidéo, de l’animation et de la robotique. Toutefois, les approches actuelles restent inefficaces, incohérentes et peinent souvent à préserver les régions non modifiées. La plupart des méthodes actuelles reposent sur l’édition de rendus multi-vues suivie d’une reconstruction, ce qui introduit des artefacts et limite leur faisabilité pratique. Pour surmonter ces défis, nous proposons Nano3D, un cadre d’édition 3D précise et cohérente, sans masque et sans entraînement préalable. Nano3D intègre FlowEdit dans TRELLIS afin d’effectuer des modifications localisées guidées par des rendus de vue frontale, et introduit par ailleurs des stratégies d’assemblage conscientes des régions, nommées Voxel/Slat-Merge, qui préservent de manière adaptative la fidélité structurelle en assurant la cohérence entre les zones modifiées et non modifiées. Les expérimentations montrent que Nano3D atteint une meilleure cohérence 3D et une qualité visuelle supérieure par rapport aux méthodes existantes. Sur la base de ce cadre, nous avons construit le premier jeu de données à grande échelle pour l’édition 3D, appelé Nano3D-Edit-100k, comprenant plus de 100 000 paires d’objets 3D de haute qualité. Ce travail répond à des défis anciens tant en conception d’algorithmes qu’en disponibilité des données, améliorant significativement la généralisation et la fiabilité de l’édition 3D, et posant les bases du développement de modèles d’édition 3D à traitement en boucle directe (feed-forward).Page du projet : https://jamesyjl.github.io/Nano3D