HyperAIHyperAI

Command Palette

Search for a command to run...

Multimodales Multi-Loss-Fusionsnetzwerk für die Sentimentanalyse

Zehui Wu Ziwei Gong Jaywon Koo Julia Hirschberg

Zusammenfassung

Diese Arbeit untersucht die optimale Auswahl und Fusion von Merkmals-Encodern über mehrere Modalitäten hinweg und kombiniert diese in einem einzigen neuronalen Netzwerk, um die Erkennung von Stimmungen zu verbessern. Wir vergleichen verschiedene Fusionsmethoden und untersuchen den Einfluss des Multi-Loss-Trainings innerhalb des multimodalen Fusionsnetzwerks und identifizieren überraschend wichtige Erkenntnisse hinsichtlich der Leistung einzelner Subnetze. Zudem haben wir festgestellt, dass die Integration von Kontext die Modellleistung signifikant steigert. Unser bestes Modell erreicht state-of-the-art-Leistung für drei Datensätze (CMU-MOSI, CMU-MOSEI und CH-SIMS). Diese Ergebnisse legen einen Wegweiser für einen optimierten Ansatz zur Merkmalsauswahl und -fusion zur Verbesserung der Stimmungserkennung in neuronalen Netzen dar.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp