HyperAIHyperAI

Command Palette

Search for a command to run...

μμμDARTS : Recherche d'architecture différentiable consciente de l'incertitude du modèle

Biswadeep Chakraborty Saibal Mukhopadhyay

Résumé

Nous présentons une méthode de recherche d'architecture différentiable sensible à l'incertitude du modèle, nommée μμμDARTS, qui optimise les réseaux de neurones afin d'atteindre simultanément une haute précision et une faible incertitude. Nous introduisons un dropout concret au sein des cellules DARTS, et intégrons un régularisateur de type Monte-Carlo dans la fonction de perte d'entraînement afin d'optimiser les probabilités du dropout concret. Un terme de variance prédictive est ajouté à la fonction de perte de validation, permettant ainsi de rechercher des architectures présentant une incertitude de modèle minimale. Les expériences menées sur CIFAR10, CIFAR100, SVHN et ImageNet confirment l'efficacité de μμμDARTS dans l'amélioration de la précision tout en réduisant l'incertitude par rapport aux méthodes DARTS existantes. En outre, l'architecture finale obtenue par μμμDARTS présente une robustesse accrue aux perturbations sur l'image d'entrée et sur les paramètres du modèle par rapport à celle obtenue par les méthodes DARTS classiques.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp