HyperAIHyperAI

Command Palette

Search for a command to run...

CLiFT : Tokens de Champ Lumineux Compressés pour un Rendu Neuronal Économique en Calcul et Adaptatif

Zhengqing Wang Yuefan Wu Jiacheng Chen Fuyang Zhang Yasutaka Furukawa

Résumé

Ce papier propose une approche de rendu neuronal qui représente une scène sous forme de "tokens de champ lumineux compressé (CLiFTs)", conservant ainsi des informations d'apparence et de géométrie riches. Les CLiFTs permettent un rendu efficace en termes de calcul grâce à des tokens compressés, tout en étant capables de modifier le nombre de tokens pour représenter une scène ou rendre une vue inédite avec un seul réseau entraîné. Plus précisément, étant donné un ensemble d'images, l'encodeur multi-vues tokenise les images avec les poses des caméras. L'algorithme K-means dans l'espace latent sélectionne un ensemble réduit de rayons comme centres de clusters en utilisant les tokens. Le condenseur multi-vues compresse les informations de tous les tokens dans les tokens centroïdes pour construire les CLiFTs. Au moment du test, étant donné une vue cible et un budget de calcul (c'est-à-dire le nombre de CLiFTs), le système collecte le nombre spécifié de tokens voisins et synthétise une vue inédite à l'aide d'un rendu adaptatif au calcul. Des expériences étendues sur les jeux de données RealEstate10K et DL3DV valident quantitativement et qualitativement notre approche, atteignant une réduction significative des données avec une qualité de rendu comparable et la meilleure note globale de rendu, tout en offrant des compromis entre la taille des données, la qualité du rendu et la vitesse du rendu.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
CLiFT : Tokens de Champ Lumineux Compressés pour un Rendu Neuronal Économique en Calcul et Adaptatif | Articles | HyperAI