Imaginez pouvoir taper simplement une commande comme « village médiéval en dessin animé » ou « station spatiale futuriste sur Mars » et générer, en quelques minutes, un monde 3D interactif et immersive. Ce monde serait cohérent dans son style et son ambiance — pas de bâtiments du milieu du XXe siècle dans votre base martienne, ni de meubles victoriens dans votre village médiéval. Il serait également fonctionnel : les différentes zones seraient correctement connectées, permettant aux personnages de se déplacer librement sans se retrouver coincés. Il y a quelques années, cela semblait sortir de la science-fiction. Mais grâce aux avancées récentes des technologies d’intelligence artificielle générative, des courts clips de films déjà impressionnants sont désormais produits à partir d’un simple prompt textuel ou visuel. Aujourd’hui, nous annonçons une percée scientifique majeure : la création de mondes 3D entièrement navigables et interactifs, que l’on peut véritablement arpenter. Nous présentons aujourd’hui WorldGen, un système état de l’art, entièrement intégré, capable de générer des mondes 3D interactifs et navigables à partir d’un seul prompt textuel. WorldGen repose sur une combinaison de raisonnement procédural, de génération 3D basée sur les modèles de diffusion et de décomposition scénique consciente des objets. Le résultat ? Des mondes 3D riches visuellement, géométriquement cohérents et efficaces à rendre, adaptés aux jeux vidéo, aux simulations ou aux environnements sociaux immersifs. Les progrès récents en génération d’objets 3D à partir de prompts textuels ou visuels sont impressionnants. WorldGen va au-delà en combinant et en innovant à partir de plusieurs technologies existantes, tant 2D que 3D. Le processus s’articule en plusieurs étapes clés : planification, création d’un blocage procédural, extraction de la carte de navigation (navmesh), génération d’images de référence, reconstruction 3D, génération initiale du modèle 3D à partir d’image, assemblage scénique basé sur la navmesh, génération initiale des textures, décomposition du scénario, extraction des éléments avec AutoPartGen accéléré, nettoyage des données, puis affinement grâce à des modèles de révision de maillage et de texturation. Contrairement à d’autres méthodes qui génèrent des mondes 3D interactifs à partir d’un seul point de vue et étendent le monde autour de ce point, WorldGen s’appuie sur une image de référence globale ou une disposition complète du scénario. Cette approche garantit une qualité élevée à distance, même au-delà de 5 à 10 mètres du point central. En effet, WorldGen produit des scènes entièrement texturées sur une surface de 50 x 50 mètres, tout en maintenant une cohérence stylistique et géométrique remarquable. Nous travaillons déjà à étendre cette taille dans les futures versions. Bien que ce projet reste à un stade de recherche et ne soit pas encore disponible pour les développeurs, le contenu généré par WorldGen est directement compatible avec les moteurs de jeu standards comme Unity ou Unreal, sans nécessiter de conversions supplémentaires ni de pipelines de rendu complexes. Bien que WorldGen représente une avancée significative vers la création de mondes virtuels diversifiés, interactifs et navigables, il présente encore certaines limites que nous travaillons à surmonter : notamment la taille maximale du monde et le temps de génération. Les futures versions devraient permettre des espaces bien plus vastes et une génération plus rapide. La création de contenu 3D reste longue, complexe et inaccessible pour beaucoup. WorldGen montre tout le potentiel de gains de temps et de réduction des coûts dans divers secteurs, tout en démocratisant l’accès à la création 3D. Il s’inscrit pleinement dans la vision que nous avons partagée lors du Connect : un avenir où chacun pourra concevoir entièrement des mondes virtuels sans jamais écrire une seule ligne de code. Remerciements Nous remercions chaleureusement les chercheurs suivants pour leur contribution essentielle à ce projet : Dilin Wang†, Hyunyoung Jung, Tom Monnier, Kihyuk Sohn, Chuhang Zou, Xiaoyu Xiang, Yu-Ying Yeh, Di Liu, Zixuan Huang, Thu Nguyen-Phuoc, Yuchen Fan, Sergiu Oprea, Ziyan Wang, Roman Shapovalov, Nikolaos Sarafianos, Thibault Groueix, Antoine Toisoul, Prithviraj Dhar, Xiao Chu, Minghao Chen, Geon Yeong Park, Mahima Gupta, Yassir Azziz, Milton Cadogan, Christopher Ocampo, Sandy Kao, Rakesh Ranjan†, Andrea Vedaldi††, chef de projet.