HyperAIHyperAI

Command Palette

Search for a command to run...

L'efficacité irraisonnable des caractéristiques profondes comme métrique perceptuelle

Richard Zhang Phillip Isola Alexei A. Efros Eli Shechtman Oliver Wang

Résumé

Bien que l'évaluation rapide de la similarité perceptive entre deux images soit presque sans effort pour les humains, les processus sous-jacents sont considérés comme étant assez complexes. Malgré cela, les métriques perceptuelles les plus utilisées aujourd'hui, telles que le PSNR et le SSIM, sont des fonctions simples et peu profondes, qui ne prennent pas en compte de nombreuses nuances de la perception humaine. Récemment, la communauté de l'apprentissage profond a découvert que les caractéristiques du réseau VGG formé sur la classification ImageNet ont été remarquablement utiles comme fonction de perte d'entraînement pour la synthèse d'images. Mais à quel point ces soi-disant « pertes perceptuelles » sont-elles réellement perceptuelles ? Quels éléments sont critiques pour leur succès ? Pour répondre à ces questions, nous introduisons un nouveau jeu de données contenant des jugements de similarité perceptive humaine. Nous évaluons systématiquement les caractéristiques profondes à travers différentes architectures et tâches et les comparons avec les métriques classiques. Nous constatons que les caractéristiques profondes surpassent toutes les métriques précédentes avec une grande marge sur notre jeu de données. Plus surprenant encore, ce résultat n'est pas limité aux caractéristiques VGG formées sur ImageNet, mais s'étend à différentes architectures profondes et niveaux de supervision (supervisée, auto-supervisée ou même non supervisée). Nos résultats suggèrent que la similarité perceptive est une propriété émergente partagée parmi les représentations visuelles profondes.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
L'efficacité irraisonnable des caractéristiques profondes comme métrique perceptuelle | Articles | HyperAI