HyperAIHyperAI

Command Palette

Search for a command to run...

Découvrir de nouvelles intentions avec le clustering profond aligné

Hanlei Zhang Hua Xu Ting-En Lin Rui Lyu

Résumé

Découvrir de nouvelles intentions est une tâche cruciale dans les systèmes de dialogue. La plupart des méthodes existantes sont limitées en ce qui concerne le transfert des connaissances antérieures des intentions connues vers les nouvelles intentions. Elles rencontrent également des difficultés pour fournir des signaux supervisés de haute qualité permettant d'apprendre des caractéristiques favorables à la classification pour regrouper les intentions non étiquetées. Dans cette étude, nous proposons une méthode efficace, le Clustering Profond Aligné (Deep Aligned Clustering), pour découvrir de nouvelles intentions avec l'aide de données d'intentions connues limitées. Tout d'abord, nous utilisons quelques échantillons d'intentions connues et étiquetés comme connaissances antérieures pour pré-entraîner le modèle. Ensuite, nous effectuons un k-means pour produire des affectations de clusters en tant que pseudo-étiquettes. De plus, nous proposons une stratégie d'alignement pour résoudre le problème d'incohérence des étiquettes lors des affectations de clusters. Enfin, nous apprenons les représentations d'intention sous la supervision des pseudo-étiquettes alignées. Avec un nombre inconnu de nouvelles intentions, nous prédisons le nombre de catégories d'intention en éliminant les clusters intentionnels à faible confiance. Des expériences approfondies sur deux jeux de données de référence montrent que notre méthode est plus robuste et réalise des améliorations substantielles par rapport aux méthodes les plus avancées actuellement disponibles. Le code source est disponible sur https://github.com/thuiar/DeepAligned-Clustering.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Découvrir de nouvelles intentions avec le clustering profond aligné | Articles | HyperAI