HyperAIHyperAI

Command Palette

Search for a command to run...

Coarse-to-Fine Q-Attention: Effizientes Lernen für visuelle robotische Manipulation durch Diskretisierung

Stephen James Kentaro Wada Tristan Laidlow Andrew J. Davison

Zusammenfassung

Wir stellen eine Grob-zu-Fein-Disretisierungs-Methode vor, die die Anwendung diskreter Verstärkungslernverfahren anstelle instabiler und datenunwirksamer Actor-Critic-Methoden in kontinuierlichen Robotikdomänen ermöglicht. Dieser Ansatz baut auf dem kürzlich vorgestellten ARM-Algorithmus auf, der den kontinuierlichen nächsten optimalen Pose-Agenten durch einen diskreten ersetzt, wobei Grob-zu-Fein-Q-Attention eingesetzt wird. Gegeben eine voxelisierte Szene lernt Grob-zu-Fein-Q-Attention, welchen Bereich der Szene „vergrößert“ werden soll. Wenn dieses „Vergrößerungsverhalten“ iterativ angewendet wird, führt dies zu einer nahezu verlustfreien Diskretisierung des Translationsraums und ermöglicht die Verwendung eines diskreten Aktionen-Deep-Q-Learning-Verfahrens. Wir zeigen, dass unser neuer Grob-zu-Fein-Algorithmus auf mehreren anspruchsvollen, sparsam belohnten, visionbasierten Robotik-Aufgaben aus der RLBench-Benchmark-Suite eine state-of-the-art-Leistung erzielt und in nur wenigen Minuten reale Welt-Politiken tabula rasa mit lediglich drei Demonstrationen trainieren kann.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp