HyperAIHyperAI

Command Palette

Search for a command to run...

vor 4 Monaten

Multimodale Fälschungserkennung mithilfe von Ensemble-Learning

{Hsin-Min Wang Yu Tsao Chia Wen Lin Wasim Ahmad Sahibzada Adil Shahzad Ammarah Hashmi}

Multimodale Fälschungserkennung mithilfe von Ensemble-Learning

Abstract

Die jüngste rasante Entwicklung der künstlichen Intelligenz (KI) hat die Erstellung von hochrealistischen Deepfakes ermöglicht, weshalb die Erkennung von Deepfake-Videos (auch als KI-synthesierte Videos bekannt) zu einer kritischen Aufgabe geworden ist. Die derzeitigen Systeme berücksichtigen die einheitliche Verarbeitung von Audio- und Videodaten häufig nicht vollständig, sodass noch erheblicher Verbesserungsbedarf besteht. In diesem Artikel konzentrieren wir uns auf die multimodale Fälschungserkennung und stellen eine tiefgreifende Fälschungserkennungsmethode auf Basis von audiovisuellen Ensemble-Lernverfahren vor. Die vorgeschlagene Methode besteht aus vier Komponenten: einem Video-Netzwerk, einem Audio-Netzwerk, einem Audiovisuellen Netzwerk sowie einem Abstimmungsmodul. Gegeben ein Video kann das vorgeschlagene multimodale Ensemble-Lernsystem identifizieren, ob es gefälscht oder echt ist. Experimentelle Ergebnisse auf einem kürzlich veröffentlichten multimodalen Datensatz namens FakeAVCeleb zeigen, dass die vorgeschlagene Methode eine Genauigkeit von 89 % erreicht und damit bestehende Modelle deutlich übertrifft.

Benchmarks

BenchmarkMethodikMetriken
multimodal-forgery-detection-on-fakeavcelebEnsemble AudioVisual Model
Accuracy (%): 0.89

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Multimodale Fälschungserkennung mithilfe von Ensemble-Learning | Forschungsarbeiten | HyperAI