HyperAIHyperAI

Command Palette

Search for a command to run...

Extension de contexte pilotée par la logique et augmentation de données pour le raisonnement logique sur le texte

Siyuan Wang Wanjun Zhong Duyu Tang Zhongyu Wei Zhihao Fan Daxin Jiang Ming Zhou Nan Duan

Résumé

Le raisonnement logique dans le texte exige une compréhension des informations logiques critiques contenues dans le texte ainsi que la capacité à effectuer des inférences à partir de celles-ci. Les grands modèles pré-entraînés pour le raisonnement logique se concentrent principalement sur les sémantiques au niveau des mots tout en éprouvant des difficultés à capturer la logique symbolique. Dans cet article, nous proposons de comprendre les symboles et expressions logiques présents dans le texte afin d’arriver à la bonne réponse. À partir de ces informations logiques, nous introduisons non seulement un cadre d’extension de contexte, mais aussi un algorithme d’augmentation de données. Le premier étend le contexte pour inclure des expressions logiques implicites conformément aux lois d’équivalence logique. Le second augmente des instances littéralement similaires mais logiquement différentes, afin de mieux capturer les informations logiques, en particulier les relations négatives et conditionnelles. Nous menons des expériences sur le jeu de données ReClor. Les résultats montrent que notre méthode atteint une performance de pointe, et que les deux composants — le cadre d’extension de contexte piloté par la logique et l’algorithme d’augmentation de données — contribuent à améliorer l’exactitude. De plus, notre système d’ensemble multi-modèles est le premier à dépasser les performances humaines sur les ensembles EASY et HARD du jeu de données ReClor.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp