HyperAIHyperAI

Command Palette

Search for a command to run...

GENESIS: Generative Scene Inference and Sampling with Object-Centric Latent Representations GENESIS: Generative Szeneinferenz und -sampling mit objektorientierten latente Darstellungen

Martin Engelcke; Adam R. Kosiorek; Oiwi Parker Jones; Ingmar Posner

Zusammenfassung

Generative Latent-Variable-Modelle etablieren sich als vielversprechende Werkzeuge in der Robotik und dem Reinforcement Learning. Trotzdem fangen die meisten standesgemäßen generativen Modelle die kompositionelle Natur visueller Szenen nicht explizit ein, obwohl Aufgaben in diesen Bereichen in der Regel distinkte Objekte beinhalten. Zwei kürzlich vorgestellte Ausnahmen, MONet und IODINE, zerlegen Szenen auf unsupervisierte Weise in Objekte. Ihre zugrundeliegenden generativen Prozesse berücksichtigen jedoch keine Komponenteninteraktionen. Daher erlauben weder MONet noch IODINE ein prinzipielles Sampling neuer Szenen. Hier stellen wir GENESIS vor, das erste objektzentrierte generative Modell für 3D-visuelle Szenen, das sowohl die Zerlegung als auch die Generierung von Szenen durch Erfassung der Beziehungen zwischen Szenekomponenten ermöglicht. GENESIS parametrisiert eine räumliche GMM (Gaussian Mixture Model) über Bilder, die aus einer Reihe von objektzentrierten latente Variablen dekodiert wird, die entweder sequentiell in amortisierter Form inferiert oder aus einem autoregressiven Prior gesampelt werden. Wir trainieren GENESIS auf mehreren öffentlich verfügbaren Datensätzen und evaluieren seine Leistung bei der Szene-Generierung, -Zerlegung und semi-supervisierten Lernprozessen.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
GENESIS: Generative Scene Inference and Sampling with Object-Centric Latent Representations GENESIS: Generative Szeneinferenz und -sampling mit objektorientierten latente Darstellungen | Paper | HyperAI