HyperAIHyperAI

Command Palette

Search for a command to run...

PET-SQL: Eine promptverstärkte zweirundige Verfeinerung von Text-to-SQL mit Kreuzkonsistenz

Zusammenfassung

Neuere Fortschritte im Bereich Text-to-SQL (Text2SQL) konzentrieren sich auf die Förderung des in-Context-Lernens bei großen Sprachmodellen (LLM), wodurch beachtliche Ergebnisse erzielt wurden. Dennoch stoßen diese Ansätze bei der Behandlung umfangreicher Datenbankschemata und komplexer Benutzerabsichten auf Herausforderungen. In diesem Artikel präsentieren wir einen zweistufigen Rahmen, um die Leistung aktueller auf LLM basierender Systeme zur Umwandlung natürlicher Sprache in SQL zu verbessern. Zunächst führen wir eine neuartige Prompt-Repräsentation ein, die als referenzverstärkte Repräsentation bezeichnet wird und sowohl Schemainformationen als auch zufällig ausgewählte Zellenwerte aus Tabellen enthält, um LLMs bei der Generierung von SQL-Abfragen zu unterstützen. Im ersten Schritt werden Frage-SQL-Paare als Few-Shot-Demonstrationen abgerufen, um das LLM zur Erzeugung einer vorläufigen SQL-Abfrage (PreSQL) anzuregen. Anschließend werden die im PreSQL genannten Entitäten analysiert, um eine Schema-Verknüpfung durchzuführen, die wesentliche Informationen signifikant komprimieren kann. Im zweiten Schritt nutzen wir das verknüpfte Schema, um die Schemainformationen im Prompt zu vereinfachen und das LLM anzuweisen, die endgültige SQL-Abfrage zu generieren. Abschließend schlagen wir als Nachverfeinerungsmodul die Verwendung von Cross-Konsistenz über verschiedene LLMs vor, anstatt der Selbstkonsistenz innerhalb eines einzelnen LLMs. Unsere Methode erreicht neue SOTA-Ergebnisse auf dem Spider-Benchmark mit einer Ausführungspräzision von 87,6 %.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
PET-SQL: Eine promptverstärkte zweirundige Verfeinerung von Text-to-SQL mit Kreuzkonsistenz | Paper | HyperAI