HyperAIHyperAI

Command Palette

Search for a command to run...

Heuristische schwach überwachte 3D-Pose-Schätzung von Menschen

Shuangjun Liu Michael Wan Sarah Ostadabbas

Zusammenfassung

Die monokulare 3D-Pose-Schätzung von RGB-Bildern hat in den letzten Jahren erhebliches Interesse geweckt. Allerdings hängen aktuelle Modelle von überwachtem Training mit 3D-Pose-Referenzdaten oder bekannten Pose-Priors für ihre Zielbereiche ab. 3D-Pose-Daten werden in der Regel mit Bewegungserfassungsgeräten gesammelt, was ihre Anwendbarkeit stark einschränkt. In dieser Arbeit präsentieren wir eine heuristische schwach überwachte 3D-Mensch-Poseschätzung (HW-HuP), um 3D-Posen zu schätzen, wenn keine Referenzdaten für die 3D-Posen verfügbar sind. HW-HuP lernt partielle Pose-Priors aus 3D-Mensch-Posedatensätzen und nutzt leicht zugängliche Beobachtungen aus dem Zielbereich, um die 3D-Pose und -Form in einem Optimierungs- und Regressionszyklus zu schätzen. Während des Trainings verwenden wir Tiefendaten zur schwachen Überwachung, jedoch nicht während der Inferenz. Wir zeigen, dass HW-HuP in zwei praktischen Szenarien, bei denen 3D-Pose-Daten schwer zu beschaffen sind – Menschenposes im Bett und Babyposes in freier Wildbahn – bedeutend bessere Ergebnisse als die besten bisherigen Modelle liefert. Darüber hinaus demonstrieren wir, dass HW-HuP auch auf öffentlichen Benchmarks vergleichbare Leistung zeigt wie die neuesten Modelle, selbst wenn diese auf 3D-Pose-Daten trainiert wurden.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Heuristische schwach überwachte 3D-Pose-Schätzung von Menschen | Paper | HyperAI