K-Planes : Champs de radiance explicites dans l'espace, le temps et l'apparence

Nous introduisons les k-planes, un modèle à boîte blanche pour les champs de radiance dans des dimensions arbitraires. Notre modèle utilise $\binom{d}{2}$ plans pour représenter une scène de dimension $d$, offrant ainsi une transition fluide entre les scènes statiques ($d=3$) et dynamiques ($d=4$). Cette factorisation plane permet d'ajouter aisément des priori spécifiques aux dimensions, tels que la régularité temporelle ou la structure spatiale multi-résolution, tout en induisant une décomposition naturelle des composantes statiques et dynamiques d'une scène. Nous utilisons un décodeur de caractéristiques linéaire avec une base de couleur apprise, qui atteint des performances comparables à celles d’un décodeur MLP noir-box non linéaire. Sur une variété de scènes synthétiques et réelles, statiques et dynamiques, à apparence fixe ou variable, les k-planes offrent une fidélité de reconstruction compétitive, souvent au niveau de l’état de l’art, avec une faible consommation mémoire : une compression de 1000 fois par rapport à une grille 4D complète, ainsi qu’une optimisation rapide grâce à une implémentation entièrement basée sur PyTorch. Pour consulter les résultats vidéo et le code source, veuillez vous rendre sur https://sarafridov.github.io/K-Planes.