HyperAIHyperAI

Command Palette

Search for a command to run...

TempSAL – Aufdeckung zeitlicher Informationen für die tiefen Aufmerksamkeitsvorhersage

Sabine Süsstrunk Mathieu Salzmann Tong Zhang Ludo Hoffstetter Bahar Aydemir

Zusammenfassung

Tiefgreifende Saliency-Vorhersagemodelle ergänzen die Objekterkennungsfunktionen und beruhen typischerweise auf zusätzlichen Informationen wie Szenenkontext, semantischen Beziehungen, Blickrichtung und Objektdissimilarität. Doch keines dieser Modelle berücksichtigt die zeitliche Natur von Blickverschiebungen während der Bildbetrachtung. Wir stellen ein neuartiges Saliency-Vorhersagemodell vor, das lernt, Saliency-Karten in aufeinanderfolgenden Zeitintervallen basierend auf menschlichen zeitlichen Aufmerksamkeitsmustern zu generieren. Unser Ansatz moduliert die Saliency-Vorhersagen lokal, indem er die gelernten zeitlichen Karten kombiniert. Unsere Experimente zeigen, dass unsere Methode die derzeit besten Modelle, einschließlich eines Multi-Dauer-Saliency-Modells, auf der SALICON-Benchmark und dem CodeCharts1k-Datensatz übertrifft. Der Quellcode ist öffentlich auf GitHub verfügbar.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp