HyperAIHyperAI

Command Palette

Search for a command to run...

Un Modèle de Langue Simple pour le Dialogue Orienté vers les Tâches

Ehsan Hosseini-Asl; Bryan McCann; Chien-Sheng Wu; Semih Yavuz; Richard Socher

Résumé

Le dialogue orienté vers les tâches est souvent décomposé en trois sous-tâches : la compréhension de l'entrée utilisateur, la décision d'action et la génération d'une réponse. Bien que cette décomposition puisse suggérer l'utilisation d'un modèle dédié pour chaque sous-tâche, nous constatons qu'une approche simple et unifiée conduit à des performances de pointe sur le jeu de données MultiWOZ. SimpleTOD est une approche simplifiée du dialogue orienté vers les tâches qui utilise un seul modèle de langage causal formé sur toutes les sous-tâches, reformulées comme un problème unique de prédiction de séquence. Cela permet à SimpleTOD d'exploiter pleinement le transfert d'apprentissage provenant des modèles pré-entraînés de domaine ouvert, tels que GPT-2. SimpleTOD améliore la précision conjointe des objectifs pour le suivi de l'état du dialogue par rapport à l'état de l'art précédent, et notre analyse révèle une robustesse aux annotations bruyantes dans ce contexte. SimpleTOD améliore également les principaux indicateurs utilisés pour évaluer les décisions d'action et la génération de réponses dans un cadre bout-en-bout : le taux d'information augmente de 8,1 points, le taux de succès de 9,7 points et le score combiné de 7,2 points.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Un Modèle de Langue Simple pour le Dialogue Orienté vers les Tâches | Articles | HyperAI