HyperAIHyperAI

Command Palette

Search for a command to run...

Pièce de Table : Une Approche Diviser-Pour-Régner pour la Sélection de Sous-Tableaux dans le Répondre aux Questions sur les Tableaux

Wonjin Lee; Kyumin Kim; Sungjae Lee; Jihun Lee; Kwang In Kim

Résumé

L'application de modèles de langage (LMs) aux tableaux est un défi en raison des différences structurelles inhérentes entre les tableaux bidimensionnels et le texte unidimensionnel pour lequel ces modèles ont été initialement conçus. De plus, lorsqu'on applique des tableaux linéarisés aux modèles de langage, les longueurs maximales de jetons souvent imposées dans les calculs d'auto-attention rendent difficile une compréhension exhaustive du contexte réparti sur de grands tableaux. Pour relever ces défis, nous présentons PieTa (Piece of Table), un nouveau cadre pour la réponse automatique à des questions basée sur des sous-tableaux (QA). PieTa fonctionne par un processus itératif consistant à diviser les tableaux en fenêtres plus petites, à utiliser les modèles de langage pour sélectionner les cellules pertinentes au sein de chaque fenêtre, puis à fusionner ces cellules en un sous-tableau. Cette approche multi-résolution capture les dépendances entre plusieurs lignes et colonnes tout en évitant les limitations liées aux entrées de contexte longues. Instancié comme un algorithme simple d'union itérative de sous-tableaux, PieTa montre une performance améliorée par rapport aux approches précédentes basées sur des sous-tableaux pour la réponse automatique à des questions.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Pièce de Table : Une Approche Diviser-Pour-Régner pour la Sélection de Sous-Tableaux dans le Répondre aux Questions sur les Tableaux | Articles | HyperAI