Command Palette
Search for a command to run...
ExeWorldBench : Jeu De Données D’évaluation Pour La Modélisation Exécutable De Mondes 3D
ExeWorldBench est un jeu de données d’évaluation pour la modélisation exécutable de mondes 3D, publié en 2026 par l’Université des sciences et technologies de Chine en collaboration avec l’Université chinoise de Hong Kong. L’article associé est « ExeWorldBench: Benchmarking Code-Based Executable 3D World Modeling ». Il vise à évaluer la capacité des modèles d’IA à comprendre les structures mécaniques, les mouvements physiques et les relations causales dans un monde tridimensionnel, ainsi que leur capacité à construire des scènes 3D exécutables par le code.
Ce jeu de données est construit sur l’environnement de modélisation et de simulation 3D Blender et couvre trois types de tâches : la reproduction de mécanismes, la composition de systèmes mécaniques multi-étapes et la génération de mondes exécutables guidée par objectif. L’évaluation ne se limite pas à la structure visuelle des scènes générées ; elle examine également les relations de connexion entre les composants mécaniques, le processus de mouvement, les interactions causales et l’achèvement des objectifs, afin de mesurer la capacité globale des modèles à passer d’observations visuelles ou d’instructions textuelles à la construction de mondes 3D exécutables.
Le jeu de données fournit des ressources telles que des instructions de tâche, des images de référence, du matériel de référence de mouvement et des prompts d’évaluation. Il prend en charge l’évaluation via Agent Harness ou API et peut être utilisé pour la recherche d’évaluation des capacités de génération de code, de raisonnement physique, de modèles du monde et de construction de scènes 3D par agents intelligents.
Ce jeu de données porte sur la capacité à construire un monde tridimensionnel fonctionnel, plutôt que sur la seule reproduction de l’apparence du monde ; il peut servir à vérifier la capacité des modèles à construire des mondes exécutables par le code.
Composition du jeu de données
Le jeu de données contient principalement les répertoires suivants :
t1 : tâche d’exécutabilité des mécanismes (Mechanism Executability), qui demande au modèle d’inférer la structure mécanique, les relations entre composants et le mode de mouvement à partir d’images de référence, puis de reconstruire un mécanisme exécutable à l’aide de code Blender ;
- t2 : tâche d’exécutabilité compositionnelle (Compositional Executability), qui demande au modèle de construire un système comprenant plusieurs étapes mécaniques et examine si la disposition spatiale, les connexions mécaniques et les interactions causales entre les composants peuvent former un processus d’exécution complet ;
- t3 : tâche de synthèse de mondes exécutables guidée par l’intention (Intent-Driven Executable World Synthesis), qui demande au modèle de construire un monde 3D exécutable à partir d’objectifs textuels de haut niveau et de contraintes physiques, et couvre deux formes de tâches : contraintes de composants spécifiés et contraintes d’objectif ;
- api_prompt : fournit les prompts d’évaluation API correspondant aux trois types de tâches. T1 et T2 utilisent un modèle de prompt unifié, tandis que T3 fournit des prompts indépendants pour différentes tâches ;
- eval : contient les prompts utilisés par le modèle d’évaluation pour évaluer la structure visuelle, le mouvement mécanique, les mécanismes causaux exécutables et l’achèvement des objectifs des scènes générées.
Citation
@article{peng2026exeworldbench,
title={ExeWorldBench: Benchmarking Code-Based Executable 3D World Modeling},
author={Peng, Xinge and Fang, Zhen and Wang, Ruibing and Lv, Yongxuan and Li, Haodong and Zhang, Guohui and Ma, Xiaoxiao and Lu, Yiting and Chen, Lin and Che, Zehui and others},
journal={arXiv preprint arXiv:2610.15166},
year={2026}
}
Créer de l'IA avec l'IA
De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.