1. Introduction au tutoriel

HunyuanWorld-Mirror est un modèle de génération de monde 3D open source, publié par l'équipe Hunyuan de Tencent en octobre 2025. Il prend en charge plusieurs méthodes d'entrée, notamment les images et vidéos multi-vues, et peut produire divers résultats de prédiction géométrique 3D tels que des nuages de points, des cartes de profondeur et des paramètres de caméra. Ce modèle adopte une architecture feedforward pure, peut être déployé sur un seul GPU et réalise une inférence de second niveau en traitant localement 8 à 32 entrées de vue. Son architecture technique comprend des indications a priori multimodales, une architecture de prédiction géométrique générale et une stratégie d'apprentissage progressif. Grâce à un mécanisme d'injection dynamique d'informations a priori, le modèle peut s'adapter avec flexibilité à toute combinaison d'informations a priori. Lors de l'entraînement, une stratégie d'apprentissage progressif basée sur l'ordre des tâches, la planification des données et la résolution progressive est employée pour maximiser la capacité de généralisation. HunyuanWorld-Mirror excelle dans la reconstruction de nuages de points 3D et la reconstruction 3DGS de bout en bout, démontrant une précision géométrique et des capacités de restauration des détails exceptionnelles. Des articles de recherche connexes sont disponibles à l'adresse suivante : [lien vers l'article pertinent].WorldMirror : Reconstruction universelle du monde en 3D avec n'importe quelle invite préalable".

Ce tutoriel utilise une seule carte graphique RTX 5090 comme ressource par défaut, mais une seule carte graphique RTX 4090 peut être utilisée au minimum pour démarrer le programme.

2. Affichage des effets

3. Étapes de l'opération

1. Démarrez le conteneur

2. Étapes d'utilisation

Si « Bad Gateway » s'affiche, cela signifie que le modèle est en cours d'initialisation. Étant donné que le modèle est grand, veuillez patienter environ 2 à 3 minutes et actualiser la page.  La première reconstruction prend environ 2 minutes, et le chargement des données et l'affichage des effets 3D peuvent prendre un certain temps.

Options des paramètres :

• Intervalle d'échantillonnage vidéo : L'intervalle entre les sessions d'échantillonnage vidéo.
• Options de reconstruction (non appliquées à 3DGS) :
  • Afficher la caméra : Indique si la caméra doit être affichée.
  • Afficher le maillage : Indique s’il faut afficher le maillage.
  • Filtrer les contours à faible confiance et les contours de profondeur/normaux : Faut-il filtrer les contours à faible confiance et les contours de profondeur/normaux ?
  • Filtrer l'arrière-plan du ciel : Faut-il filtrer l'arrière-plan du ciel ?
• Projection gaussienne 3D : une visualisation interactive de la pulvérisation gaussienne 3D avec vidéo RGB et de profondeur (disponible en téléchargement au format PLY).
• Nuage de points/Maillage : Nuage de points.
• Cartes de profondeur : résultats d’estimation de profondeur à vue unique (téléchargeables au format PNG).
• Cartes normales : visualisation de l’orientation de la surface par vue (téléchargeable au format PNG).
• Paramètres de la caméra : pose estimée de la caméra et paramètres intrinsèques (téléchargeables au format JSON).

4. Discussion

🖌️ Si vous voyez un projet de haute qualité, veuillez laisser un message en arrière-plan pour le recommander ! De plus, nous avons également créé un groupe d’échange de tutoriels. Bienvenue aux amis pour scanner le code QR et commenter [Tutoriel SD] pour rejoindre le groupe pour discuter de divers problèmes techniques et partager les résultats de l'application↓

Informations sur la citation

Les informations de citation pour ce projet sont les suivantes :

@article{liu2025worldmirror,
  title={WorldMirror: Universal 3D World Reconstruction with Any-Prior Prompting},
  author={Liu, Yifan and Min, Zhiyuan and Wang, Zhenwei and Wu, Junta and Wang, Tengfei and Yuan, Yixuan and Luo, Yawei and Guo, Chunchao},
  journal={arXiv preprint arXiv:2510.10726},
  year={2025}
}