HyperAIHyperAI

Command Palette

Search for a command to run...

Un Modèle Unifié pour la Résumation Extractive et Abstractive Utilisant une Perte d'Incohérence

Wan-Ting Hsu; Chieh-Kai Lin; Ming-Ying Lee; Kerui Min; Jing Tang; Min Sun

Résumé

Nous proposons un modèle unifié combinant les forces de la sommatisation extractive et abstractive. D'une part, un modèle extractif simple peut obtenir une attention au niveau des phrases avec des scores ROUGE élevés, mais il est moins lisible. D'autre part, un modèle abstrait plus complexe peut obtenir une attention dynamique au niveau des mots pour générer un paragraphe plus lisible. Dans notre modèle, l'attention au niveau des phrases est utilisée pour moduler l'attention au niveau des mots, de sorte que les mots dans les phrases moins attentives sont moins susceptibles d'être générés. De plus, une nouvelle fonction de perte d'incohérence est introduite pour pénaliser l'incohérence entre les deux niveaux d'attention. En formant notre modèle de manière end-to-end avec la fonction de perte d'incohérence et les pertes originales des modèles extractifs et abstraits, nous obtenons des scores ROUGE à la pointe de la technologie tout en étant le résumé le plus informatif et lisible sur le jeu de données CNN/Daily Mail lors d'une évaluation humaine solide.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Un Modèle Unifié pour la Résumation Extractive et Abstractive Utilisant une Perte d'Incohérence | Articles | HyperAI