Évaluation de la Qualité Perceptive de la Photographie sur Smartphone

À mesure que les smartphones deviennent les appareils photo principaux des utilisateurs, la qualité des capteurs photo et des modules associés de photographie computationnelle est devenue une norme implicite pour évaluer et classer les smartphones sur le marché grand public. Nous menons jusqu’à présent l’étude la plus complète sur l’évaluation perceptive de la qualité de la photographie réalisée avec les smartphones. Nous introduisons la base de données Smartphone Photography Attribute and Quality (SPAQ), composée de 11 125 images prises par 66 smartphones, chacune étant accompagnée des annotations les plus riches jamais recueillies à ce jour. Plus précisément, nous avons collecté une série d’opinions humaines pour chaque image, incluant la qualité globale de l’image, les attributs visuels (luminosité, vivacité des couleurs, contraste, bruit, netteté) ainsi que des étiquettes de catégories scéniques (animal, paysage urbain, humain, intérieur, paysage naturel, scène nocturne, plante, nature morte et autres), dans un environnement de laboratoire soigneusement contrôlé. Les métadonnées au format EXIF (Exchangeable Image File Format) de toutes les images ont également été enregistrées afin de permettre une analyse approfondie. Nous réalisons également les premières tentatives d’utilisation de cette base de données pour entraîner des modèles d’évaluation aveugle de la qualité d’image (BIQA) basés sur des réseaux de neurones profonds de type baselines et multi-tâches. Les résultats fournissent des perspectives précieuses sur les interactions entre les données EXIF, les attributs d’image et les sémantiques de haut niveau avec la qualité d’image, sur la conception de prochains modèles BIQA, ainsi que sur l’optimisation des systèmes de photographie computationnelle sur les appareils mobiles. La base de données ainsi que les modèles BIQA proposés sont disponibles à l’adresse suivante : https://github.com/h4nwei/SPAQ.