HyperAIHyperAI

Command Palette

Search for a command to run...

il y a 4 mois

Détection robuste de falsification d’images dans les images partagées sur les réseaux sociaux en ligne

{Jun Liu Jinyu Tian Jiantao Zhou Haiwei Wu}

Détection robuste de falsification d’images dans les images partagées sur les réseaux sociaux en ligne

Résumé

L’usage croissant des logiciels de retouche d’images, tels que Photoshop ou Meitu, remet en question l’authenticité des images numériques. Parallèlement, la diffusion massive des réseaux sociaux en ligne (OSNs) en fait les canaux dominants pour diffuser des images falsifiées, à des fins de propagation de fausses nouvelles, de rumeurs, etc. Malheureusement, les diverses opérations à perte adoptées par les OSNs — telles que la compression et le redimensionnement — posent de grandes difficultés à la mise en œuvre d’un détecteur robuste de falsifications d’images. Afin de lutter contre les falsifications partagées via les OSNs, nous proposons dans ce travail un nouveau schéma d’entraînement robuste. Nous menons d’abord une analyse approfondie du bruit introduit par les OSNs, que nous décomposons en deux composantes : un bruit prévisible et un bruit inédit, modélisés séparément. Le premier simule le bruit généré par les opérations connues (révélées) des OSNs, tandis que le second vise non seulement à compléter le premier, mais aussi à tenir compte des faiblesses intrinsèques du détecteur lui-même. Nous intégrons ensuite ce bruit modélisé dans un cadre d’entraînement robuste, ce qui améliore significativement la robustesse du détecteur de falsifications d’images. Des résultats expérimentaux étendus sont présentés afin de valider l’avantage du schéma proposé par rapport à plusieurs méthodes de pointe. Enfin, pour favoriser le développement futur de la détection de falsifications d’images, nous avons constitué un jeu de données public de falsifications à partir de quatre jeux de données existants et de trois OSNs parmi les plus populaires. Le détecteur conçu a récemment remporté la première place dans une compétition internationale de détection de faux documents officiels. Le code source et le jeu de données sont disponibles à l’adresse suivante : https://github.com/HighwayWu/ImageForensicsOSN.

Benchmarks

BenchmarkMéthodologieMétriques
image-manipulation-detection-on-casia-osnWu22
AUC: 0.862
F-score: 0.462
Intersection over Union: 0.417
image-manipulation-detection-on-casia-osn-1Wu22
AUC: 0.833
Intersection over Union: 0.405
f-Score: 0.358
image-manipulation-detection-on-casia-osn-2Wu22
AUC: 0.866
Intersection over Union: 0.431
f-Score: 0.478
image-manipulation-detection-on-casia-osn-3Wu22
AUC: 0.858
Intersection over Union: 0.421
f-Score: 0.466
image-manipulation-detection-on-columbia-osnWu22
AUC: 0.883
Intersection over Union: 0.611
f-Score: 0.714
image-manipulation-detection-on-columbia-osn-1Wu22
AUC: 0.883
Intersection over Union: 0.631
f-Score: 0.727
image-manipulation-detection-on-columbia-osn-2Wu22
AUC: 0.889
Intersection over Union: 0.628
f-Score: 0.727
image-manipulation-detection-on-columbia-osn-3Wu22
AUC: 0.883
Intersection over Union: 0.626
f-Score: 0.724
image-manipulation-detection-on-dso-osnWu22
AUC: 0.859
Intersection over Union: 0.320
f-Score: 0.447
image-manipulation-detection-on-dso-osn-1Wu22
AUC: 0.823
Intersection over Union: 0.252
f-Score: 0.366
image-manipulation-detection-on-dso-osn-2Wu22
AUC: 0.839
Intersection over Union: 0.233
f-Score: 0.341
image-manipulation-detection-on-dso-osn-3Wu22
AUC: 0.808
Intersection over Union: 0.253
f-Score: 0.370
image-manipulation-detection-on-nist-osnWu22
AUC: 0.783
Intersection over Union: 0.253
f-Score: 0.329
image-manipulation-detection-on-nist-osn-1Wu22
AUC: 0.764
Intersection over Union: 0.214
f-Score: 0.286
image-manipulation-detection-on-nist-osn-2Wu22
AUC: 0.785
Intersection over Union: 0.239
f-Score: 0.313
image-manipulation-detection-on-nist-osn-3Wu22
AUC: 0.780
Intersection over Union: 0.219
f-Score: 0.294

Construire l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec du co-codage IA gratuit, un environnement prêt à l'emploi et les meilleurs prix GPU.

Co-codage IA
GPU prêts à utiliser
Meilleurs prix
Commencer

Hyper Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Détection robuste de falsification d’images dans les images partagées sur les réseaux sociaux en ligne | Articles de recherche | HyperAI