HyperAIHyperAI

Command Palette

Search for a command to run...

UAVM: Auf dem Weg zur Vereinigung von Audio- und Visuellen Modellen

Yuan Gong, Member, IEEE, Alexander H. Liu, Andrew Rouditchenko, and James Glass, Fellow, IEEE

Zusammenfassung

Konventionelle audiovisuelle Modelle verfügen über unabhängige Audios- und Videozweige. In dieser Arbeit vereinen wir die Audios- und Videozweige durch das Entwerfen eines einheitlichen audiovisuellen Modells (UAVM). Das UAVM erreicht eine neue Top-Genauigkeit von 65,8 % bei der Klassifizierung audiovisueller Ereignisse auf VGGSound. Interessanterweise stellen wir außerdem einige faszinierende Eigenschaften des UAVM fest, die den modalspezifischen Gegenstücke fehlen.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp