HyperAIHyperAI

Command Palette

Search for a command to run...

ExeWorldBench: Evaluierungsdatensatz Für Ausführbare 3D-Weltmodellierung

ExeWorldBench ist ein im Jahr 2026 von der Universität für Wissenschaft und Technik Chinas gemeinsam mit der Chinesischen Universität Hongkong veröffentlichter Benchmark-Datensatz für ausführbare 3D-Weltmodellierung. Die zugehörige Veröffentlichung ist „ExeWorldBench: Benchmarking Code-Based Executable 3D World Modeling“. Er zielt darauf ab, die Fähigkeit von KI-Modellen zu bewerten, mechanische Strukturen, physikalische Bewegungen und kausale Zusammenhänge in dreidimensionalen Welten zu verstehen sowie ausführbare 3D-Szenen durch Code zu konstruieren.

Dieser Datensatz basiert auf der Blender-3D-Modellierungs- und -Simulationsumgebung und umfasst drei Aufgabentypen: die Reproduktion mechanischer Vorrichtungen, die Komposition mehrstufiger mechanischer Systeme und die zielgerichtete Generierung ausführbarer Welten. Die Bewertung betrachtet nicht nur die visuelle Struktur der generierten Szenen, sondern untersucht auch die Verbindungsbeziehungen zwischen mechanischen Bauteilen, Bewegungsabläufe, kausale Interaktionen und die Zielerreichung, um die umfassende Fähigkeit von Modellen zu messen, aus visuellen Beobachtungen oder Textanweisungen ausführbare 3D-Welten zu konstruieren.

Der Datensatz stellt Ressourcen wie Aufgabenanweisungen, Referenzbilder, Bewegungsreferenzmaterialien und Bewertungs-Prompts bereit. Er unterstützt die Evaluierung über Agent Harness oder API und kann für Forschungsarbeiten zur Bewertung von Codegenerierung, physikalischem Schlussfolgern, Weltmodellen und der Fähigkeit von Agenten zur Konstruktion von 3D-Szenen eingesetzt werden.

Dieser Datensatz dreht sich darum, ob eine lauffähige dreidimensionale Welt konstruiert werden kann, und nicht nur um die Wiederherstellung des Erscheinungsbilds der Welt. Er kann verwendet werden, um die Fähigkeit von Modellen zu prüfen, durch Code ausführbare Welten zu konstruieren.

Zusammensetzung des Datensatzes

Der Datensatz enthält hauptsächlich die folgenden Verzeichnisse:

t1: Aufgabe zur Ausführbarkeit mechanischer Vorrichtungen (Mechanism Executability). Das Modell muss aus Referenzbildern mechanische Strukturen, Komponentenbeziehungen und Bewegungsarten ableiten und mit Blender-Code eine ausführbare mechanische Vorrichtung rekonstruieren;

  • t2: Aufgabe zur kompositionellen Ausführbarkeit (Compositional Executability). Das Modell muss ein System mit mehreren mechanischen Phasen konstruieren; untersucht wird, ob räumliche Anordnung, mechanische Verbindungen und kausale Interaktionen zwischen den Komponenten einen vollständigen Ausführungsprozess bilden können;
  • t3: Zielgetriebene Aufgabe zur Synthese ausführbarer Welten (Intent-Driven Executable World Synthesis). Das Modell muss anhand übergeordneter Textziele und physikalischer Einschränkungen eine ausführbare 3D-Welt konstruieren; umfasst zwei Aufgabenformen: Einschränkungen für festgelegte Komponenten und Zielbeschränkungen;
  • api_prompt: Stellt die API-Bewertungs-Prompts für die drei Aufgabentypen bereit. T1 und T2 verwenden eine einheitliche Prompt-Vorlage, während T3 für verschiedene Aufgaben separate Prompts bereitstellt;
  • eval: Enthält die Prompts, die das Bewertungsmodell verwendet, um die visuelle Struktur, mechanische Bewegung, ausführbare kausale Mechanismen und Zielerreichung der generierten Szenen zu bewerten.

Zitation

@article{peng2026exeworldbench,
  title={ExeWorldBench: Benchmarking Code-Based Executable 3D World Modeling},
  author={Peng, Xinge and Fang, Zhen and Wang, Ruibing and Lv, Yongxuan and Li, Haodong and Zhang, Guohui and Ma, Xiaoxiao and Lu, Yiting and Chen, Lin and Che, Zehui and others},
  journal={arXiv preprint arXiv:2610.15166},
  year={2026}
}

KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp