HyperAIHyperAI

Command Palette

Search for a command to run...

Un modèle neuronal unifié pour l'évaluation de la lisibilité basée sur la projection de caractéristiques et une fonction de perte équilibrée par longueur

Wenbiao Li Ziyang Wang Yunfang Wu

Résumé

Pour l’évaluation de la lisibilité, les méthodes traditionnelles s’appuient principalement sur des classificateurs d’apprentissage automatique utilisant des centaines de caractéristiques linguistiques. Bien que les modèles d’apprentissage profond soient devenus la méthode dominante pour la quasi-totalité des tâches de traitement du langage naturel (NLP), leur application à l’évaluation de la lisibilité reste peu explorée. Dans cet article, nous proposons un modèle basé sur BERT, intégrant une projection de caractéristiques et une fonction de perte équilibrée par longueur (BERT-FP-LBL), destiné à l’évaluation de la lisibilité. Plus précisément, nous introduisons une nouvelle méthode semi-supervisée guidée par des connaissances sur le niveau de difficulté, permettant d’extraire des caractéristiques de sujet afin de compléter les caractéristiques linguistiques traditionnelles. À partir des caractéristiques linguistiques, nous utilisons un filtrage par projection pour extraire des caractéristiques orthogonales, servant à enrichir les représentations de BERT. En outre, nous concevons une nouvelle fonction de perte équilibrée par longueur afin de traiter la distribution très hétérogène des longueurs des données. Notre modèle atteint des performances de pointe sur deux jeux de données de référence en anglais et sur un jeu de données de manuels scolaires chinois, et obtient une précision quasi parfaite de 99 % sur un des jeux de données anglais. En outre, les résultats de notre modèle sont comparables à ceux des experts humains dans un test de cohérence.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp