HyperAIHyperAI

Command Palette

Search for a command to run...

il y a 4 mois

Évaluateur fondé sur un Modèle de Langage pour la Compression de Phrases

{Akiko Aizawa Zhiyuan Luo Yang Zhao}

Évaluateur fondé sur un Modèle de Langage pour la Compression de Phrases

Résumé

Nous présentons ici un évaluateur fondé sur un modèle de langage pour la compression de phrases par suppression, en considérant cette tâche comme une suite d’opérations de suppression et d’évaluation effectuées à l’aide de cet évaluateur. Plus précisément, l’évaluateur est un modèle neuronal syntaxique appris à partir des collocations syntaxiques et structurales entre les mots. Ensuite, une série d’opérations itératives de suppression par essai-erreur est menée sur les phrases sources au sein d’un cadre d’apprentissage par renforcement, afin d’obtenir la meilleure compression cible. Une étude empirique montre que le modèle proposé peut générer efficacement des compressions plus lisibles, comparables ou supérieures à plusieurs méthodes de référence robustes. En outre, nous introduisons un ensemble de test de 200 phrases pour un grand jeu de données, établissant ainsi une nouvelle référence pour les recherches futures.

Benchmarks

BenchmarkMéthodologieMétriques
sentence-compression-on-google-datasetBiRNN + LM Evaluator
CR: 0.39
F1: 0.851

Construire l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec du co-codage IA gratuit, un environnement prêt à l'emploi et les meilleurs prix GPU.

Co-codage IA
GPU prêts à utiliser
Meilleurs prix
Commencer

Hyper Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp