HyperAIHyperAI

Command Palette

Search for a command to run...

RVT-2: Lernen präziser Manipulation aus wenigen Demonstrationen

Ankit Goyal Valts Blukis Jie Xu Yijie Guo Yu-Wei Chao Dieter Fox

Zusammenfassung

In dieser Arbeit untersuchen wir, wie ein robotisches System konstruiert werden kann, das mehrere 3D-Manipulationsaufgaben auf der Grundlage von Sprachanweisungen lösen kann. Um in industriellen und häuslichen Bereichen nützlich zu sein, sollte ein solches System in der Lage sein, neue Aufgaben mit wenigen Demonstrationen zu erlernen und sie präzise zu lösen. Vorherige Arbeiten, wie PerAct und RVT, haben dieses Problem untersucht, jedoch oft Schwierigkeiten bei Aufgaben mit hohen Präzisionsanforderungen. Wir untersuchen, wie diese Systeme effektiver, präziser und schneller gemacht werden können. Durch eine Kombination architektur- und systemebener Verbesserungen schlagen wir RVT-2 vor, ein Multitask-3D-Manipulationsmodell, das sich sowohl im Training als auch in der Inferenz um den Faktor 6 und 2 schneller als sein Vorgänger RVT verhält. RVT-2 erreicht einen neuen Stand der Technik auf RLBench, indem es die Erfolgsrate von 65 % auf 82 % steigert. RVT-2 ist auch in der realen Welt effektiv, wo es Aufgaben mit hohen Präzisionsanforderungen, wie das Aufheben und Einführen von Steckern (plugs), mit nur zehn Demonstrationen erlernen kann. Visuelle Ergebnisse, Code und trainiertes Modell sind unter folgender Adresse verfügbar: https://robotic-view-transformer-2.github.io/.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
RVT-2: Lernen präziser Manipulation aus wenigen Demonstrationen | Paper | HyperAI