HyperAIHyperAI

Command Palette

Search for a command to run...

HDR-GS : Synthèse de nouvelles vues à dynamique élevée efficace à 1000x plus vite grâce au Gaussian Splatting

Yuanhao Cai Zihao Xiao Yixun Liang Yulun Zhang Xiaokang Yang Yaoyao Liu Alan Yuille

Résumé

La synthèse de vue novel en gamme dynamique élevée (HDR, High Dynamic Range) vise à générer des images photoréalistes à partir de nouvelles perspectives en utilisant des techniques d'imagerie HDR. Les images HDR rendues capturent une plage plus étendue de niveaux de luminosité, offrant ainsi davantage de détails scéniques par rapport aux images classiques à gamme dynamique faible (LDR, Low Dynamic Range). Les méthodes HDR actuelles pour la synthèse de vue novel sont principalement fondées sur NeRF. Toutefois, elles souffrent de temps d'entraînement longs et de vitesses de déduction lentes. Dans cet article, nous proposons un nouveau cadre, High Dynamic Range Gaussian Splatting (HDR-GS), capable de rendre efficacement des vues novel HDR et de reconstruire des images LDR à partir d'un temps d'exposition fourni par l'utilisateur. Plus précisément, nous concevons un modèle de nuage de points gaussiens à double gamme dynamique (DDR) qui utilise des harmoniques sphériques pour ajuster la couleur HDR et un tonemapper basé sur un MLP pour générer la couleur LDR. Les couleurs HDR et LDR sont ensuite alimentées dans deux processus parallèles de rasterisation différentiable (PDR) afin de reconstruire respectivement des vues HDR et LDR. Pour établir une base de données adéquate au développement des méthodes fondées sur le splatting gaussien 3D en HDR NVS, nous recalibrer les paramètres de caméra et calculons les positions initiales des points gaussiens. Les expériences montrent que notre HDR-GS dépasse la méthode de pointe basée sur NeRF de 3,84 dB et 1,91 dB pour la synthèse de vue novel LDR et HDR respectivement, tout en offrant une vitesse de déduction 1000 fois plus rapide et une durée d'entraînement réduite à seulement 6,3 %.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp