HyperAIHyperAI

Command Palette

Search for a command to run...

Lernen durch Abstraktion: Die neurale Zustandsmaschine

Drew A. Hudson Christopher D. Manning

Zusammenfassung

Wir stellen die Neural State Machine vor, mit dem Ziel, die Lücke zwischen den neuronalen und symbolischen Ansichten der KI zu schließen und ihre ergänzenden Stärken für die Aufgabe des visuellen Schließens zu integrieren. Gegeben ein Bild, prognostizieren wir zunächst einen wahrscheinlichkeitstheoretischen Graphen, der seine zugrunde liegende Semantik darstellt und als strukturiertes Weltmodell dient. Anschließend führen wir sequenzielles Schließen über den Graphen durch, indem wir seine Knoten iterativ durchlaufen, um eine gegebene Frage zu beantworten oder eine neue Schlussfolgerung zu ziehen. Im Gegensatz zu den meisten neuronalen Architekturen, die darauf ausgelegt sind, eng mit den rohen sensorischen Daten zu interagieren, operiert unser Modell stattdessen in einem abstrakten latente Raum. Dabei werden sowohl die visuelle als auch die linguistische Modalität in semantikbasierte Darstellungen transformiert, was eine erhöhte Transparenz und Modularität ermöglicht. Wir evaluieren unser Modell auf VQA-CP und GQA, zwei aktuellen VQA-Datensätzen, die Kompositionsalität, mehrstufiges Schließen und vielfältige Schlussfolgerungsfähigkeiten erfordern, wobei es in beiden Fällen Stand-der-Kunst-Ergebnisse erzielt. Zusätzlich führen wir weitere Experimente durch, die das starke Generalisierungsvermögen unseres Modells in verschiedenen Dimensionen veranschaulichen. Dazu gehören neuartige Konzeptkompositionen (novel compositions of concepts), Veränderungen in der Antwortverteilung (changes in the answer distribution) und unbekannte linguistische Strukturen (unseen linguistic structures). Diese Experimente demonstrieren die Qualität und Effektivität unserer Herangehensweise.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp