HyperAI
Command Palette
Search for a command to run...
ExeWorldBench 是由中国科学技术大学联合香港中文大学于 2026 年发布的可执行 3D 世界建模评测数据集,相关论文为「ExeWorldBench: Benchmarking Code-Based Executable 3D World Modeling」,旨在评估 AI 模型对三维世界中机械结构、物理运动及因果关系的理解能力,以及通过代码构建可执行 3D 场景的能力。
该数据集基于 Blender 3D 建模与仿真环境构建,涵盖机械装置复现、多阶段机械系统组合和目标驱动的可执行世界生成三类任务。评测不仅关注生成场景的视觉结构,还考察机械部件之间的连接关系、运动过程、因果交互及目标完成情况,以衡量模型从视觉观察或文本指令到可执行 3D 世界构建的综合能力。
数据集提供任务指令、参考图像、运动参考素材及评估提示词等资源,支持通过 Agent Harness 或 API 两种方式开展评测,可用于代码生成、物理推理、世界模型及智能体 3D 场景构建能力的评估研究。
该数据集围绕能否构造可运行的三维世界展开,而非仅关注世界外观的还原,可用于检验模型通过代码构建可执行世界的能力。
数据集组成
数据集主要包含以下目录:
t1:机械装置可执行性任务(Mechanism Executability),要求模型根据参考图像推断机械结构、组件关系及运动方式,并使用 Blender 代码重建可执行的机械装置;
- t2:组合可执行性任务(Compositional Executability),要求模型构建包含多个机械阶段的系统,考察组件之间的空间布局、机械连接及因果交互能否形成完整的执行过程;
- t3:目标驱动的可执行世界生成任务(Intent-Driven Executable World Synthesis),要求模型根据高层级文本目标和物理约束构建可执行 3D 世界,涵盖指定组件约束和目标约束两种任务形式;
- api_prompt:提供三类任务对应的 API 评测提示词。其中 T1、T2 使用统一提示词模板,T3 为不同任务提供独立提示词;
- eval:包含评估模型使用的提示词,用于评估生成场景的视觉结构、机械运动、可执行因果机制及目标完成情况。
Citation
@article{peng2026exeworldbench,
title={ExeWorldBench: Benchmarking Code-Based Executable 3D World Modeling},
author={Peng, Xinge and Fang, Zhen and Wang, Ruibing and Lv, Yongxuan and Li, Haodong and Zhang, Guohui and Ma, Xiaoxiao and Lu, Yiting and Chen, Lin and Che, Zehui and others},
journal={arXiv preprint arXiv:2610.15166},
year={2026}
}
此数据集由社区用户贡献,仅用于教育和信息目的。如有任何内容涉及版权侵权,请通过 [email protected] 联系我们,我们将及时审核并删除。