Ensemble De Données Vidéo Du Jeu GF-Minecraft

L'ensemble de données GF-Minecraft est un ensemble de données vidéo annotées d'action de haute qualité créé conjointement par l'Université de Hong Kong et Kuaishou Technology en 2025. Il est principalement utilisé pour la recherche de moteurs de jeu génératifs. Les résultats de l'article connexe sont «GameFactory : créer de nouveaux jeux avec des vidéos interactives génératives".

L'ensemble de données utilise Minecraft comme plate-forme de collecte de données en raison de son API complète, de son environnement ouvert diversifié et de son vaste espace d'action. 70 heures de vidéos de jeux ont été collectées en exécutant des séquences d'actions aléatoires prédéfinies et annotées. Pour améliorer la diversité, 3 biomes (forêt, plaines, désert), 3 conditions météorologiques (clair, pluvieux, orage) et 6 périodes (par exemple, lever du soleil, midi, minuit) sont préconfigurés, générant plus de 2 000 clips vidéo. Chaque clip contient 2 000 images et est accompagné d'une description textuelle générée par le modèle de langage multimodal MiniCPM-V.

Cet ensemble de données est conçu pour la génération de vidéos contrôlées par mouvement et répond aux trois exigences clés suivantes :

1. Actions personnalisables：Facilite la collecte de données à grande échelle et à faible coût.
2. Séquence d'action impartiale:Assurer la diversité des combinaisons d’actions et la couverture des événements à faible probabilité.
3. Scénarios divers:Contient des descriptions textuelles pour capturer la dynamique physique d'une scène particulière.