HyperAIHyperAI

Command Palette

Search for a command to run...

vor 4 Monaten

Visual Relationship Detection mit tiefem strukturellem Ranking

{Xilin Chen Hong Chang Yuhong Guo Kongming Liang}

Abstract

Die visuelle Beziehungsdetektion zielt darauf ab, die Interaktionen zwischen Paaren von Objekten zu beschreiben. Im Gegensatz zu einzelnen Objekterkennungsaufgaben ist die Anzahl möglicher Beziehungen deutlich größer, was die alleinige Exploration basierend auf der visuellen Erscheinung der Objekte erschwert. Zudem sind die Annotationen visueller Beziehungen aufgrund der begrenzten menschlichen Aufwand oft unvollständig, was die Modelltrainierung und -bewertung zusätzlich erschwert. In diesem Paper stellen wir einen neuen Ansatz namens Deep Structural Ranking für die visuelle Beziehungsdetektion vor. Um die Darstellungsfähigkeit der visuellen Erscheinung zu ergänzen, integrieren wir mehrere Hinweise zur Vorhersage der in einem Eingabebild enthaltenen Beziehungen. Darüber hinaus entwickeln wir eine neue Ranking-Zielfunktion, die sicherstellt, dass annotierte Beziehungen höhere Relevanzscores erhalten. Im Gegensatz zu früheren Arbeiten ermöglicht unser vorgeschlagener Ansatz sowohl die Förderung der gemeinsamen Auftretens von Beziehungen als auch die Milderung des Problems der Unvollständigkeit. Experimentelle Ergebnisse zeigen, dass unsere Methode auf zwei weit verbreiteten Datensätzen die derzeit besten Ansätze übertrifft. Zudem demonstrieren wir ihre Überlegenheit bei der Erkennung von Zero-Shot-Beziehungen.

Benchmarks

BenchmarkMethodikMetriken
visual-relationship-detection-on-vrdvrd-dsr
R@100: 93.18
R@50: 86.01
visual-relationship-detection-on-vrd-1vrd-dsr
R@100: 23.29
R@50: 19.03

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Visual Relationship Detection mit tiefem strukturellem Ranking | Forschungsarbeiten | HyperAI