HyperAIHyperAI

Command Palette

Search for a command to run...

Einzelansicht-Schätzung der Roboterpose und Gelenkwinkel durch Rendern und Vergleichen

Yann Labbé; Justin Carpentier; Mathieu Aubry; Josef Sivic

Zusammenfassung

Wir stellen RoboPose vor, eine Methode zur Schätzung der Gelenkwinkel und der 6D-Kamera-zu-Roboter-Pose eines bekannten Gliedroboters aus einem einzelnen RGB-Bild. Dies ist ein wichtiges Problem, um mobilen und itineranten autonomen Systemen die Fähigkeit zu verleihen, mit anderen Robotern nur unter Verwendung visueller Informationen in nicht instrumentierten Umgebungen zu interagieren, insbesondere im Kontext der kollaborativen Robotik. Es ist auch herausfordernd, da Roboter viele Freiheitsgrade aufweisen und einen unendlichen Raum möglicher Konfigurationen haben, die bei der Aufnahme durch eine einzelne Kamera oft zu Selbstverdeckungen und Tiefenunsicherheiten führen. Die Beiträge dieser Arbeit sind dreifach. Erstens führen wir einen neuen Ansatz „rendern & vergleichen“ ein, mit dem die 6D-Pose und die Gelenkwinkel eines Gliedroboters geschätzt werden können. Dieser Ansatz kann von synthetischen Daten trainiert werden, verallgemeinert sich auf neue unbekannte Roboterkonfigurationen zur Testzeit und kann auf verschiedene Roboter angewendet werden. Zweitens demonstrieren wir experimentell die Bedeutung der Roboterparametrisierung für die iterativen Poseaktualisierungen und entwickeln eine Parametrisierungsstrategie, die unabhängig von der Roboterstruktur ist. Schließlich zeigen wir experimentelle Ergebnisse an bestehenden Benchmark-Datensätzen für vier verschiedene Roboter und beweisen, dass unsere Methode den aktuellen Stand der Technik erheblich übertrifft. Der Quellcode und vortrainierte Modelle sind auf der Projektwebseite https://www.di.ens.fr/willow/research/robopose/ verfügbar.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Einzelansicht-Schätzung der Roboterpose und Gelenkwinkel durch Rendern und Vergleichen | Paper | HyperAI